朝天宮後殿左右後方，各有一棟洋式二層加強磚造樓房，便是番仔樓。樓頂女兒牆上飾以西式欄杆，屋頂採寶頂式，上置葫蘆。一樓入門口之雨庇為木構造斜撐仿中式斗拱，左東邊番仔樓外觀是洗石子，右西邊番仔樓外觀採露明磚造，飾以白灰土線條，外觀典雅。這西式樓房與中式朝天宮相互輝映，中西合壁成建築群為一特殊的景觀。

番仔樓建成於大正元年（1912），是北港第一次出現洋樓的建築。當時蔡然標、蔡川等人為爭取核建朝天宮，在日人消除中國風貌老街、古厝及推動現代化運動、市街改正計劃的風潮下，為順利完成擴建及表示支持日人市街改正，提出在朝天宮後殿左右設計增建此二棟二層洋樓，來消除日人的無理刁難，同時也與街民多方溝通、排除異議，可謂貢獻良多。

左棟番仔樓，一向為廟住持之禪房及會客室。後來廟方於昭和 11 年（1936），設立貧民施醫所，並聘請專業醫師吳玉峰來服務，凡貧民一律免費。右棟番仔樓自完工後，則被當時商工銀行看上，向朝天宮交涉承租，設立「商工銀行北港支行」，成為北港第二座金融中心。國民政府來後，商工銀行易名為「第一銀行北港支行」。後幾經轉手，一度成為朝天宮放置儀杖等器物場所，也一度成為「老阿媽義工香火袋製造工坊」 等多用途。