古代实行“都”“图”制度时，此地被称为二十一都二图，后被简称为二图。

古代县级行政区划里“都”和“图”是指县城和集中居住地，此地当时为二十一都二图，人们简称二图，沿用至今。

二图村为宝山村委会驻地，1949年解放初期，南山村属东渚乡，1950年-1956年初，分级社时为大寺行政村。1957年成立高级社，宝山与南山合并称永星25社，1958年成立人民公社，并入东渚公社第二大队。1961年由东渚公社第二大队分出，称南山大队。1983年政社分设改称南山村委会，后划入浒墅关镇，2010年浒墅关因开发需要，二图村拆除。