就在這座牌樓的下方，以前有座社區圖書館。地方上的耆老談到這座圖書館都還很驕傲，也很惋惜，因為它曾經是雲林第一座社區圖書館。

這座圖書館正式啟用的時間是民國64年2月15日，也是雲林縣第一座社區圖書館。不過說是圖書館，其實它原本的建築物卻是斗南將軍崙溫磘宮的神明戲臺，戲臺下方則是被社區整理為圖書館，所以圖書館本身就比路面為低，而這也成為它日後被拆除的致命原因。由於將軍崙溫磘宮緊鄰崙子溪，當時堤防還未興建，因此30多年前一場颱風所帶來的豪雨成災，土泥漫淹將軍崙，圖書館因為地勢低更是無法倖免，而使得當時的藏書全都付之一炬。等到颱風過後，戲臺與圖書館受損嚴重，後來在斗南鎮公所會勘下，拆除了戲臺，再由鄉民募款改建成今日溫磘宮的牌樓。

當年這座圖書館有多風光？除了是社區居民、小孩借書、看書的地方之外，當年的臺灣省省主席謝東閔以及省建設處長林洋港都曾來到這裡參觀。民國67年9月林洋港已經升任為省主席，仍不忘再次拜訪將軍里與圖書館，可見一斑。