部氏祖先原本是日本古代豪族之一秦氏的後裔,而秦氏則是自中國吳國渡海過來的移民。秦氏不但傳授紡織技術給日本人,更在日本各地展開新樂公演,令日本人大開眼界。所謂新樂,是3世紀末到4世紀初,在中國非常發達的一種大衆藝能,内容包含歌舞、雜技、力技、魔術、偶人劇、口技,以及訓練犬、猴子、鳥等小動物表演節目的大衆娛樂。據說是融合西藏藝能與中國藝能的新型技藝。
秦氏集團當時主要在中國南部都市與寺廟巡回演出,日後組織逐漸膨脹,分散到中國各地。其中之二、三個樂團,為了尋求新天地,渡海到日本來。日本和服的傳統稱呼是吳服,語源正是取自秦氏出身的吳國。