潘金源昭和4年（1929）出生於今花蓮縣玉里鎮觀音里，據祖傳習俗，與曾祖父同名。自幼未受教育，不識字。8歲隨父親潘旺財到瑞穗的咖啡會社第二農場工作，當時負責為日本人照顧馬匹。戰後，咖啡會社解散，曾到臺東關山鎮黃金順里長的農場工作，因而結識了林秋妹，並於20歲時結婚。婚後遷到寶華現居地開山種地。曾經做過抽藤、到北部挖礦。回到寶華後種香茅，也做過囝仔販，介紹青少年到臺北工作。他在寶華已住50多年，兒女皆已成家立業。