大正七（1918）年主祀北白川宮能久親王的新竹神社完工，潛園中的重要建築爽吟閣作為能久親王在新竹地區的駐紮地，被拆遷移到新竹神社境內保存。根據《新竹市古蹟公園潛園調查研究》，可得知遷建前後的爽吟閣差異如下：爽吟閣前有水院，池水與外面大池相通，遷後不作；迴廊下方闢半圓形拱洞，有如水關，遷後不作；迴廊正面設門和石階，有如碼頭，遷後不作，並改成長方形漏窗；迴廊為平頂，周圍設有矮欄，遷後改為單坡斜頂，並以較高屋脊取代矮欄。