墨园村作为首批中国传统村落、广东省古村落，保留了众多古建筑，是惠城区现存规模最大、保存较好的一个古建筑群。其中以陈氏三大屋——大夫第、茂记与荣记大屋、二记大屋最为出名。

300多年前，墨园陈氏祖先迁居至此，后在家族第六代祖先陈尚忠开始兴盛。其发家故事至今仍被陈氏后人津津乐道。

相传，陈尚忠娶了芦洲岚派一户有钱人家的女儿，因聪明伶俐，深得岳父喜爱。由于家裹穷，岳父便赠送了一大坛白银给他。在得到岳父资助后，善于经商的陈尚忠开始在东江利用船运做贩糖生意，赚了大钱，因此在墨园村建了一座4000平方米的大宅，也就是如今的墨园大夫第。陈尚忠长子陈文则追随其从商，次子陈泰一心读书，最终中了举人，后来他们分别建起了茂记与荣记大屋、二记大屋。

鲜为人知的是，墨园陈氏后人口口相传的“岳父”就是岚派许氏第五代祖先许苑仕。据岚派许氏族谱记载，许苑仕“一女曰黑，配墨园监生陈公廷弼，举人陈泰之母”。

关于岚派许家和墨园陈家之间的关系，许合辉略有所闻：“曾听老一辈提起，陈家和许家几百年前曾是一家。”