大光聚落雖然觀光人潮眾多，但本質上仍脫不了漁村色彩，而居住在此地的漢人則以吳氏大家族最廣為人知，並且依照位於大光里金鳳寺的傳說，當時吳氏家族的先祖來台時在海上遇到大風浪，祈求觀音菩薩保佑之後，便平安渡過，之後便把觀音菩薩侍奉於吳姓公廳，1930年正式興建金鳳寺供奉觀音菩薩，民國63年改名為觀林寺，卻因吳氏內部不和，有部分人重新打造金身侍奉，吳家古厝旁的觀林寺雖然較新，但仍有許多中國風格的彩繪，令人耳目一新。