烏日區溪尾里保安堂，奉祀「季府三千歲」，是溪尾里重要的信仰中心，里民習慣尊稱為「大人爺公」，當地流傳有「大人爺公犁頭鏢移溪退水」的傳說。
據傳日治時期保安堂尚未建廟，「大人爺公」奉祀在溪尾寮（今溪尾里1鄰、2鄰）的爐主家中。當時芬園堤防尚未修築，由於溪尾寮位處烏溪與貓羅溪匯流之地，每年雨季時，烏溪、貓羅溪大水奔湧、宣洩不及，常有氾濫成災之虞。此時鄉民每日觀察烏溪水情，若判斷溪水有溢流淹沒村莊的危險，便會祭祀抬請「大人爺公」神像至烏溪水畔，然後朝洶湧大水擲入「犁頭鏢」。在大人爺公神力的庇護下，湍急的溪水會退至犁頭鏢之後，或直接朝對岸湧去，免除鄉里洪災之危，里民將此種神蹟稱為「移溪」。
戰後，1959年八七水災與1963年葛樂禮颱風，造成烏溪洪水兩度沖毀芬園堤防，大水沖毀溪尾寮聚落屋舍，並從上游飄來諸多受難者遺骸，在此劇烈天災下，溪尾里內竟無人傷亡，此事亦被視為大人爺公神威庇佑，至今猶在老一輩口中津津樂道。
