潘岳雄1943年（民國32年）生於臺南彩繪世家，祖父潘春源及父親潘麗水皆為臺南知名畫師。從小耳濡目染，跟隨父親至各地廟宇擔任助手，後因經濟考量於美軍十三航空隊服務十多年，直到美軍撤臺，才又重振畫筆。

        潘岳雄早期作品多為父子協力合作，由潘麗水起稿畫線後，潘岳雄負責上色，最後再由父親開面，有時落款名題為潘岳雄，主要是為提拔潘岳雄，提升名氣，讓他能與父親同享盛名。1976年（民國65年）出師承攬業務，父親仍會從旁指導協助，而臺南法華寺正是潘岳雄的獨立處女作。作品多分布於南部，如臺南法華寺、臺南五帝廟、臺南玉井北極殿、高雄三鳳宮等。

        潘岳雄的彩繪風格承襲府城潘氏彩繪風格，門神的構圖及神情甚具氣勢，服飾配件裝飾性高。後傳蔡英傑、孔國榮、陳志文等人，配合的油漆師傅為黃春風，在臺北陳德星堂的門神劍帶上即有潘岳雄及黃春風的落款。