中国人素有文酒之会雅风。经营乙园略见规模后，从一九五二年起，每年的六月底一个星期六学校刚放暑假时，他邀请耶鲁的艺文人士到乙园来，个人发表当年度最得意作品，相互品题。次日再邀请帮忙的学生们一起来野餐、交流感想。几年下来，乙园文会遂成为当地盛事。一九六五最后一次文会来了七百多人（《市廛居》P.263），一半以上他并不认识，真是少长咸集，群贤毕至。吴讷孙以其微薄助教薪资，在养家糊口之余，凭借一己之力，将有中国生活情趣的延陵乙园及文会介绍给美国东岸艺文界，达到他出国时立下的心愿。
乙园一九五一初建时只有平房三间，第二期增建楼房（风雨楼），一九七九秋天大火。当时他任教于华盛顿大学，乙园的邻居打电话告诉他屋子失火，房子烧了好久。鹿桥当下走出屋外散步一圈，让心情平静后，照常去上课开后。几天后刚好在华府有个会议，他绕道乙园视察灾情，屋近全毁，他意识到，他心中一个梦想的建筑是永远不可能实现了。从隔年夏天起，吴讷孙每年暑假都回乙园，在旧的地基上盖新的屋舍，从残存的屋宇接续新的建筑。一直到了七十余岁，左眼已渐老化时他还在做木工修房子，继续打造心中之梦。吴恩孙将四个子女的名字纳入乙园，分别是“明湖、婷屋、屏石、楹柱”。婷屋的空间架构颇为奇特，中国传统三合院的空间架构竟然可以在一间屋子里表达出来，屋内隐含着中国建筑空间的层次及风水观念；更特殊的是，早在四十几年前，这屋子已经有节约能源的观念了。夏天的生活空间较大，冬天则活动集中在一区，以节省暖气费用。
乙园是吴讷孙设计庭园与房舍的试验场所，一个他自道“左转入山林，右转回庭院的试验性设计”。虽然不是主修建筑，吴讷孙的创意绝不输给有天分的建筑师。人在婷屋走动，有的地方狭窄，有的地方高敞，有时在室内，有时在室外，走动的路面又时时不平。一九七六年台湾举办中正纪念堂竞图，圣路易市的华人建筑师组队参加，吴讷孙总结乙园的园林设计经验，放入这个设计案的园林中。一九八一年他也曾在东海大学发表有关中国庭园演讲。对他而言，这不只是书上读来的知识，更是亲身体验的空间感受。
吴讷孙自述延陵乙园“像个难民营，又像灵修舍，正如我们的世界一样。”经营田园是艺术，生活其中则是教育，乙园是他教育子女、学生将知识学问落实于生活的场所。刚开始夫妻两人一起经营乙园，随着子女逐渐长大，最后六人一起建设自己的家园。吴讷孙在《中国于印度建筑》一书的卷首自题：献给慕莲、昭明、昭婷、昭屏、昭楹，一起构筑延陵乙园的伙伴。希望在无法回去前，我们能在那里再相会。乙园经营了几十年，历经大火及几度增修，始终也没有完工的一天。这儿是吴氏一家人共同成长生活的家园，或也将是两夫妻最终的长眠之地。
