嘉賓旅社興建於昭和15年（1940 ），由製材師傅吳嘉隆親自設計、建造與經營。吳嘉隆於日治昭和年間由臺北至關山開墾林業，運用關山在地林業木料，建築融合臺灣本土與西洋、日本之樣式。從日治時代至今，歷經「華香食堂」、「嘉賓飯店」、及「嘉賓旅社」三個時期。民國50年代（1960年代），隨著關山大圳完工，關山的農業發展進入高峰，加上南橫公路動工，帶動大量住宿需求，因此將前棟餐館改為旅館，增設九間客房，其中三間為擁有衛浴設備之套房，並更名為「嘉賓旅社」，由吳嘉隆先生配偶吳陳香女士負責經營管理。十餘年前，第一次拓寬關山博愛路時，將原本的廚房、餐廳、及四間客房拆除，並於外牆及屋瓦上方包覆鐵皮以利維護，迄今「嘉賓旅社」仍然完整保留民國40年代（1950年代）「嘉賓飯店」擴建後之樣貌。