郭芝苑晚年於苑裡為公路住宅後棟，與其獎盃和藏書留影。
郭芝苑為公路上住宅後棟藏書豐富，書櫃上多是日文書籍，種類從音樂作曲教科書、音樂評論月刊到文學小說都有，尤其文學類的書籍多過於音樂創作書籍。郭芝苑留學日本時深受現代音樂所吸引，除了在日本大學藝術學部音樂作曲科學習之外，也急於向當時已經成名的音樂家江文也討教作曲技巧。雖然與江文也僅有數次短暫的互動，但因同樣身為台灣人，且以創作民族現代音樂為志，郭芝苑在精神上相當欽佩且追尋著這位前輩的腳步。
據郭芝苑口述，江文也曾對他說技法並非作曲最重要的事，創作的根源和文化思想才是他所重視的，因而他不跟郭芝苑談作曲，而是談論尼采等西方哲學思想，波特萊爾、瓦雷里的詩作，也拿出夏卡爾、高更的畫作舉例表示，轉向東方元素的創作是趨勢，鼓勵郭芝苑保持學習開放性、邁向民族音樂創作之路。郭芝苑也確實在留日期間除了購買自學的樂譜、音樂教科書之外，也購置大量文學書籍，廣泛閱讀現代文學。第一次留日的郭芝苑渴求知識，但因戰火連天，多數時間都是自學，據其晚年合作藝術歌曲的聲樂家阮文池訪談中所述，郭芝苑每一本書都讀得相當透徹，加上記憶力驚人，時常可以引述特定書籍內某段話，來佐證自己的創作理念。
