吴家花园的始建年代不详。1990年代起，有些文献认为
承泽园、吴家花园的前身是建于清朝
雍正三年（1725年）的
自得园，由雍正帝赐给其十七弟
果亲王允礼。经过考证，此说法有误。自得园紧靠
圆明园西南侧，即今
中共中央党校南院处，而非圆明园正南方远处的承泽园、吴家花园一带。
吴家花园原来是承泽园西部的一部分。
中华民国袁世凯当政时期，此部分出售给
吴鼎昌（字达诠），故称“吴家花园”。当时，该花园大门的门楣上挂有“吴达诠别墅”的木牌。但据说吴鼎昌未在此居住过。
作家
冰心在写于1936年的《一日的春光》一文中称，“四月三十日的下午，有位朋友约我到挂甲屯吴家花园看海棠”，接着写了此次吴家花园看海棠的经过。