由华侨大学第二至第五届董事会董事、香港中文大学荣誉讲座教授、美国密歇根大学研究科学家杜祖贻教授于2004年倡建,并捐赠100万港元建设资金及一批价值不菲的文物,2013年再捐赠300万元人民币作为文物馆发展基金。随后新加坡魏维贤教授、梁荣基教授、李怀德先生;香港蔡永业夫人、吴忠旦先生、麦继强教授、魏玉心博士、刘素绚女士、洪兰教授、胡宗仁先生;台湾欧豪年教授等知名人士以各种方式襄助。馆藏展品迄今已达数百件。原四端文物馆临时展馆位于华侨大学厦门校区行政研发大楼23层。新馆位于郑年锦图书馆二期,2014年11月开馆。