文貴醫院啟用於日治時代昭和3年（1928）完工啟用，建築為二層洋樓，臨街立面接近巴洛克式風格，典雅古樸，並融合傳統特色，側面有閩南式山牆與荷蘭鐵剪刀，屋脊為正脊與垂脊並陳，多元面貌呈現文化融合的建築趣味。曾文貴醫師為赴日本東京深造的醫學士，學國歸國後開設文貴醫院執業，並獲選公醫，其投入地方公共事務亦不遺餘力，民國35年（1946）當選下營鄉第一屆鄉民代表，1947年連選連任第2-6屆鄉民代表會主席，連任五屆長達15年。民國60年（1971）文貴醫院歇業，民國63年（1974）文貴醫師病逝於下營，享年78歲。
文貴醫院歇業約達35年後，因下營上帝廟欲價購其用地而挑起「文貴醫院保存」的議題，就其建築特色、醫療及公共衛生歷史，以及文貴醫師對地方公共事務的參與，海墘營文史工作室認為文貴醫院是下營重要的文化資產，必須保留下來，於2009年啟動「文貴醫院再展風華」社區營造計畫，並於2009年登錄為歷史建築，但也因這文化資產保存挑起海墘營文史工作室與上帝廟之間的對立，文貴醫院最終保存失敗於2010.6.30拆除，而後，海墘營文史工作室轉型為財團法人海墘營文化藝術基金會。
