英國領事館官邸建築建成於1879年，1925年英國將領事館建物販賣給當時的日本政府，1936年日本政府將英國領事官邸作為海洋觀測所使用，1945年戰後中華民國政府仍將其當作氣象測候所使用至1973年，之後維持一段時間的廢棄狀態，此期間於1977年賽洛瑪颱風來襲時造成官邸建築嚴重損毀，直至1985年高雄市政府動工修復領事館官邸並作為史蹟文物陳列館。至2009年始將長期誤認為領事館的山上官邸正名。