與霧峰萊園、新竹北郭園及板橋林本源園邸合稱「台灣四大名園」。其特色為一個園區有三種不同的風貌，當中的中式庭園為地方士紳吳尚新於道光初所建，將北邊原屬荷治時期荷蘭通事何斌的庭園舊址收購，沿地勢高低建構庭園，並聘名匠仿漳州城外飛來峰佈置假山、池台水閣、奇花異木，極盡美觀，名為「吳園」。而園內的台南公會堂，則為仿巴洛克式建築，二樓柱子為仿愛奧尼克造型，而屋頂則為法國式屋頂，在日治時代是民眾公共聚會的處所。一角的十八卯茶屋是由日本人柳下勇三設立的料理食堂，現稱為柳屋，有著日式風格的木造魚鱗板外牆和低矮的設計，除供應茶和點心外，還會不定期舉辦藝術座談會。