西高山属于
薄扶林郊野公园范围，
薄扶林玛丽医院则坐落其西南山腰。虽然西高山并不及太平山高，可是仍为观赏香港岛西部风景的理想位置，可远眺
维多利亚港及
东博寮海峡的景致。
三国鼎立初期，名载史册的大名士高彪之子——高岱，自幼聪明好学，博通群经，满腹经纶，誉满江东。但他不问班事，隐居在西高山北麓，淡泊明志，耕读自娱。当时割据江东的孙策，慕高岱之名，命他出山谋策，高岱不允，孙策便加以囚禁，最后被杀害。 江东人民为纪念这位名士，把高岱安葬在他生前隐居的西高山北麓，为他修起高大的坟墓，并把这座山命名为高山，后人因区别于东境的的胶山，便称作“西高山”历来地方志的图籍也都标上“西高山”之名。
在西高山中段西侧，荆棘丛中有一崖石，石壁上镌刻着三篆体字：“降福泉”，上款是：清顺治十七年（1660），字迹清晰入目，距今已有339年的历史了。这是西高山唯一保存完整的一处崖刻。池为六角形，为山上寺僧饮水之源。此泉无论春夏秋冬，从不涸竭，水清彻见底，亮如明镜，真乃属奇迹。当地群众传说，喝了这井水，便“福寿无量”，故名“降福泉”。
又称吴文化博览苑，旅游界称它为无锡民俗村。 吴文化公园是国内由农民捐资创办的第一座大型文化园林，位于江苏省无锡市惠山区堰桥镇西高山，占地46.7公顷，仿古建筑面积3.7万平方米。公园始建于1984年仲春，设景布点着眼寓自然景观与人文景观为一体，以吴地数千年历史文化为经，以大文化各个剖面为纬，融优秀民族文化、乡土国情教育于一园，为一项国内罕见的独具特色的文化建设工程。 吴园以吴文化为内涵，园内已建成十八展馆十六胜景。有稻丰圩、堰里农舍、桃花村酒店、蚕桑巷、吴地船桥史馆、锡山交通馆、无锡院士馆、爱国碑廊、锡山教育馆、吴地开发史厅、吴地名人厅、教师山、吴地佛教文化馆、吴地民间信仰文化馆、吴地三百六十行展馆、江南风情苑、福寿山庄、财神阁等18个馆区。有十六胜景有孕吴朝晖、古井藏剑、红烛照天、九桥十美、犀挑日月、仙石瑞雪、五龙呈祥、红霞晚钟、承露双桃、缘合三生、降福灵泉、发财路头、玉蟹生珠、霞客遗踪、灵鹊情深、莲泉生慧等十六胜景。
无锡有民谚：“三月三，西高山。”农历三月三是上巳节，纪念伏羲女娲和王母娘娘的生日，城里的居民都要出城踏青，无锡北城的就要上西高山。西高山上曾经有座庙，上巳的辰光就会有盛大的庙会。