今日所見之虎尾糖廠周邊建設如同心公園、醫務所、俱樂部、驛站等，主要是明治42年（1909），藤山雷太接收虎尾製糖工場後，積極建設而成。藤山財團接手經營後，仿照歐洲工業革命的市街規劃，在「英日同盟」的背景下，許多日治時期的工業設計或是社會勞工福利的概念都參考英國。因此，「藤山集團」除了設立學校、神社之外，更有提供員工和眷屬做為平時集會交誼的場所的，名稱為「清交俱樂部」。 當時虎尾庄五間厝製糖工場可說是臺南州轄下全嘉南地區規畫最完善的社區。此棟員工和眷屬平時作為集會活動空間，設備齊全、空間寬敞。台糖接收後，則改為虎尾糖廠文康中心，並約略在民國74年（1985）左右遭到無名火焚毀，後遂由臺糖公司虎尾糖廠將其予以拆除。