六龜分局桃源分駐所，日治時期為雁爾駐在所。清朝時居住在桃源區的原住民以拉阿魯哇族為主，拉阿魯哇族是由排剪社、美壟社、塔臘社、雁爾社四個部落所組成，在清代末期，漢人稱他們為「頂四社」，之後日本人引用此名稱而稱之為「上四社」或「四社」。桃源部落在日治時期稱為雁爾社（Gani），原住民語稱為kaluvunga，意為牛群聚集的地方，因為以前居住的平埔族和拉阿魯哇族人在農閒時會將水牛野放在此地而得名。拉阿魯哇族人原本散居在荖濃溪右岸，主要聚集在雁爾駐在所附近，當時大部分的布農族尚居住在小關山下的舊社，後來日人推行理蕃政策，將大部分的布農族人集中遷移到現在桃源部落對面的Salavag和老勤和Ulaizuan，使得桃源區成為拉阿魯哇族和布農族混居的地區。