1954年（民國43年）原籍雲林縣莿桐鄉甘厝村的林清流，從褒忠鄉馬鳴山鎮安宮，迎回五年千歲於自宅供奉，後因蘇府千歲邀請前往代天府協助設壇，並轉而供奉於知本代天府，1957年（民國46年），文、武壇乩童不和，村民便將孔夫子、濟公等神，從代天府分靈到煙仔寮，與五年千歲合祀於林宅，1960年（民國48年）3月24日正式設堂為大成堂，主祀孔子，1963年（民國52年）8月正式建廟，1964年（民國53年）改稱為孔子廟。1978年（民國67年）9月26日改為主祀濟公活佛，為今日的濟化殿。

濟化殿是兩殿式的二樓建築，一樓前殿為大成殿，主祀至聖孔子，供有大、小二尊神像，同祀神有南、北斗 星君，殿內屋緣，有孟子及孔門弟子七十二賢的剪黏塑像。後殿為儒道釋教寶殿，供奉濟公活佛、五年千歲、玄天上帝、城隍爺、齊天大聖爺、地母至尊、太上道祖、九天玄女、包公、保生大帝、陳靖姑、月下老人、三太子等神。二樓為大雄寶殿，供奉釋迦佛祖、觀世音菩薩、關聖帝君、金母娘娘、媽祖諸神佛，是煙仔寮居民的共同信仰，農曆2月2日濟公聖誕及農曆10月25日五年千歲聖誕是每年最重要的祭典。