1965年春，馬祖防衛司令官兼政務委員會主任委員雷開瑄中將，為響應復興中華文化，推廣社會教育，闢資百萬元於1966年冬責成虎賁部隊鳩工興建連江縣社會教育館，從建築主體到杯、盤、桌椅，均由建築師特別設計，當時主事者的視野與對文化的重視可見一般。歷時十月，於1967年9月18日新廈落成，舉辦揭幕典禮，由指揮官主持，翌年1月15日正式對外開放。 社教館成立之初，有來自美國新聞處所贈之設備，為1966年8月，首席顧問華德中校訪馬祖時，代表美新聞處致贈政委會，包含十六米厘電影放映機一部，電影片22架、錄音機1架、錄音帶36捲和圖書164冊，均以長期租借方式交由政委會管理和運用。空間上則包含四大部份；第一部份是服務台，供應部與康樂室，為民眾代書，查詢，販賣冷飲及下棋，欣賞音樂的場所；第二部份是交誼廳供民眾團體集會用，第三、四部份為陳列室與閱覽室。 政委會當時以極為精簡的人力，設置館長等三位編制內公務人員，來推動文化復興運動，舉辦藝術講座、家事職業訓練、各種藝文活動與展覽以及圖書館服務等。直到1992年底，實施達卅六年的戰地政務解除，開始地方自治以後，社教館的功能與業務型態逐漸轉型。1994年，承教育部專款補助貳仟伍佰萬元，委請馬祖防衛司令部規劃興建「連江縣社會教育館」新址，並蒙獲當時教育部郭部長題銜，於1994年4月12日在各界的祝賀聲中正式落成啟用，設置圖書室、展覽室、演藝廳。2001年1月1日改制為連江縣立文化中心。2003年1月1日改制為連江縣政府文化局，2017年1月1日改制為連江縣政府文化處。