该图大体可分为远景、中景、近景三段式：远景为高山峻岭，悬崖峭壁，主峰巍峨，形势十分险峻；中景为山腰，和悬崖峭壁夹江对岸的平缓山坡，期间树木和杂草丛生；近景为山坡和平地，长有几棵树干粗大的苍松和杂树，有的盘根虬曲，枝叶茂密，树荫下的茅亭座落期间，弯树下有一位长者，站在水畔平坡上，作回首之状，观赏山色，后有一僮子携琴随后。画面的右侧为开阔湖面，湖水平如镜，平湖滩渚参差。此幅有项元汴、耿信会藏印多方。
明吴讷题跋：“合人风度冠时流，笔底江山不易求。退直归来思故隐，满怀清兴付沧州。孟端善竹树山水，人有求者，率写一树一竹，一日退直，兴怀故山，乃写隐居图遗其友胡汝器。后一年，汝器持示予，因题此，以见孟端山水不易得，而汝器见重于孟端者弗浅也。吴讷敏德识。”
王绂一生中曾画过多幅隐居图，这与他个人的身世际遇相关，如曾滴戍山西朔州长达二十年，建文二年（1400）才返归江南，隐居无锡九龙山，且作了《
秋林隐居图》。《隐居图》作于任官期间，抒写他身居庙堂，心怀林泉的志向和情操，所渭“满怀清兴付沧州”，其心情与作《秋林隐居图》时已大不相同，增添了恬静安逸的情致，这与他的地位、心境的变化密切相关。
从吴讷题识中可知，此画为王绂为好友胡汝器所作，以吴讷诗题“退直归宋思故隐”，可知王绂此图作于永乐年间（1403—1424年）在京任职期，故大致可确定此画为王绂晚年之作，
王绂（1362—1416），明代画家。绂，一作芾，字孟端，号友石、螯叟，后以字行。无锡（今属江苏）人。太祖洪武时生员，尝北游江淮，浮黄河，游太行，出雁门，时人慕其名，争延致之，因事被累，谪戍山西十余年。永乐初，以善书被荐，供事文渊阁，宫中书舍人，后归江南，隐居九龙山，咏左太冲诗：“何必丝与竹，山水有清音”，遂自号九龙山人。工画山水，师王蒙，风格苍郁清润；亦作平远小景，近似倪瓒，尤擅墨竹，有“出姿媚于遒劲之中，见洒落于纵横之外”之评。其墨竹，在明代很有影响，昆山夏杲师之，亦享大名。传世作品有《湖山书屋图》《竹石图》等。能诗，著有《友石山房集》。