《幻园琐忆》是“幻园”主人离开旧居数十年后的一篇回忆，写得很伤感。关于园中的布置，文中说道：“一条长长的、两旁摆满鲜花的甬道，通向小园深处。甬道的尽头有一对搭了架子的茂密的龙爪槐，夏日满地浓阴，清凉无汗。”“东南角假山上有座茅亭，是全园最高处，通向茅亭的‘山路’曲折萦回，颇见匠心。有的要步过池上的石梁，经过山洞，宛转拾级而上，始达山顶。有的隐在花丛里。或要经过枝叶相交、浓阴蔽日的林间小路，先把你引向池边，然后峰回路转，才隐约见到登山的石磴。”“我母亲的书房与她的卧室毗连，在楼上，东南两面全部是窗户，听说原是一个大阳台改造的。窗外有紫白丁香十几株，还有海棠和太平花。每当三四月间，这些花几乎同时绽放，推开窗户，花气熏人欲醉，只听见隐隐的蜜蜂声，，‘下临无地’，一片花海。这间书房像一叶小舟在花海中浮荡。”（《赵守俨文存》，中华书局1989年版）
“幻园”易主，原因大约即如《幻园琐忆》所云“后来连维持小园的现状都不可能了”。入住者之一，便是外子。
——根据管理部门存档，东总布胡同的这座宅院建成于光绪三十一年（1905）。据说原初的主人是一位德国工程师，他也是宅院的设计者。后来在一次..中把宅子做抵押，输给了一位下野军阀。1949年北京和平解放后，新成立的交通部买下这所宅院，价格是三千匹布。当时父亲受命组建交通部，于是组织上安排全家住进来。不过当日调至交通部任职的外地干部还有不少没有解决住房或住所里面没有取暖设备，父亲就把这所二层楼的楼下全部让出来为一部分干部解决困难。那时候的院子，主院是南院，西边有两个以月亮门相通的跨院。进大门后一道二门，从北到南一条很长的砖石甬道，甬道南头两边各一棵龙爪槐，尽端一株杏树，结果很甜。前行则即以一排太湖石合作屏障的后园。入眼一个藤萝架，后园里一座太湖石叠成的假山，贴着假山一株老榆树。山上一座小亭子，里边设着石桌石凳，可供纳凉。假山西侧一个大水池，夏天孩子们便在水中嬉戏。院子里种着桃树、枣树、海棠、沙果、桑树、丁香，靠西墙一棵樱桃树，太湖石边两株合欢。西跨院里也有枣树和桃树，还有一个葡萄架。楼前一带翠竹，凌霄缘墙而上，花开时节窗边朵朵艳红。
