柏楊的寫作生涯始於臺南，文物收藏也終於臺南。回想三十出頭的柏楊初來臺，剛覓得臺南工學院附中的教職工作，碰巧在報上看見了中華文藝獎金委員會的徵文啟事。為了圖個溫飽，他創作生平第一篇小說〈人民〉並成功獲得發表機會，此次經歷也成為未來寫作生涯的重要起點。二○○六年，柏楊因身體狀況欠佳而封筆，決定將多年以來的文物手稿捐出，一部分送至北京的中國現代文學館，另一部分典藏則有賴友人蘇進強與臺南大學的牽線促成，方能圓滿柏楊文物館這樁美事。

柏楊文物館為相鄰的兩棟二層樓建築，中有空橋相連，共計三大主要展區。一樓為「柏楊文物典藏館」，作家生平大事牆環繞整個館區，一邊參觀、一邊輕盈地涉過柏楊近九十年的歲月長河。展場中央為手稿、著作與獎章證書的展示。柏楊與讀者文友的往來書信，一展老作家在嚴謹治學態度之外所展現的風趣與溫情。二樓則規劃為「柏楊文字空間」與「花園新城客廳」，收藏柏楊被稱作「革命性出版」的《柏楊版資治通鑑》，以及各式海外授權出版的著作，展現其豐沛的創作能量。其中最值得一提者，莫過於獄中環境與住家空間的實景打造，進入其中，彷彿親臨昏暗的綠島監獄牢房與狹窄的衛浴設備，體會老作家或蹲或坐在斗室內，和著汗珠一字一字寫的艱苦過程。花園新城則是老作家沉思、休閒、寫作的美好山居。柏楊在這重獲自由的人生「新城」，生命中累積的創傷終能療癒、結痂。