慈山位于嘉善一中校内，临近原校门口。站在门外，整座慈山便可一览无余。因其特殊的地理位置，慈山逃过了战争烟火的焚毁，自然灾害的破坏，旧城改造的拆迁，以及动乱的“
文化大革命”。能幸运地完整保存下来，还有一个重要原因，慈山的主人
曹庭栋是清代的一介书生，纯粹的文人，不为官为政，不沾带一点政治色彩，易于逃过历朝历代的劫难。
原来慈山的主人曹庭栋虽然满腹文章，才高八斗，却不愿入仕为官，而一心在家孝敬父母。只要母亲高兴，他都设法满足。一年，母亲七十大寿，忽然想游山玩水，可惜年事已高，难以成行。为了实现母亲这个愿望，曹庭栋在自家的花园里挖了一个池塘，养上荷花，把挖出来的泥土，堆成土山，垒上形态各异的假山石，植上各种树木花草。于是花园就有山有水了，母亲看了非常高兴，犹如置身于山水之间，平身的愿望得以实现。母亲让儿子为此山取个好听的名字，曹庭栋略加思索，随口答道：这山是为慈母七十大寿而造，就叫“慈山”吧，并自号“慈山居人”。后人在山下植了一片竹林，谓之“孝顺竹”，以颂扬曹庭栋的孝子之心。
不久，母亲病故，曹庭栋守灵尽孝，埋头著书，以谢母亲养育之恩。经过几十个寒暑，写出《老老恒言》、《婚礼通考》等三十多部著作，其中多部作品被收入清《四库全书》，成为清代著名的著书家。