美術館建築原是歷史超過百年的台灣銀行舊分行，現今所留下的3層樓洋式大樓。與其他美術館最大的區別，在於保有老庫房等銀行格局，扶梯、花窗等也能窺見銀行舊貌。