《吴山图》是作者的朋友魏用晦离任吴县县令时，当地百姓送给他的一幅山水画。本文即以这幅画为线索，先寥寥数笔概写吴县的风物名胜和湖光山色，然后自然而然地写出魏用晦在担任县令时与当地百姓结下的难以忘怀的深厚感情，并以北宋苏轼和韩琦的故事，揭示出“然后知贤者于其所至，不独使其人之不忍忘，而己亦不能自忘于其人也”，以此来称颂魏用晦对吴县的缱绻深情。作者不刻意雕饰文字而写得清新淡雅，着眼吴县山水画而寓意于山水画外，构思颇为新巧。
《吴山图》是吴县百姓送给离任县令魏用晦的纪念品，其功用相当于众多已程式化的“去思碑”。但吴县百姓所送的《吴山图》却是礼轻情义重，因为它代表了老百姓对廉洁贤明县令的真情实感。对于作者归有光来说，吴县的山山水水实在太熟悉了，加之自己也曾在湖州府长兴县任过县令，因此，对《吴山图》的意义当有切身的感受，故下笔为文，随兴生发，侃侃而谈，毫无造作应酬之嫌。第一段作者不直接从《吴山图》说起，而是极写吴县的山川形胜，而这些自然景观本身又极富文化积淀，显示出深广的历史文化内涵。第二段先交待自己与《吴山图》主人的同年关系，再引出《吴山图》的故事，顺理成章地将一地的山川形胜与为官一任、造福一方的贤能之士联系起来，同时也为下文的议论作了坚实的铺垫。第三段先从县令的贤与不贤对老百姓的关系说起，又用苏轼和韩琦的故事为例，说明贤能之官吏自然会能得到当地百姓的深切怀念。最后又上升到真正的贤者是“不独使其人之不忍忘而已，亦不能自忘于其人也。”最后一段称赏魏用晦是属于“不能自忘于其人”的贤者，“如之何而使吾民能忘之也！”全文结构巧妙，层次井然，抒情含蓄。作者紧扣官与民的关系来展开议论，同时也是借他人酒杯浇自家之块垒，真可谓运思良苦。
