王安石第二次罢相后,回到家乡,在钟山南麓江宁府东门建了一座半山园,从此过着隐居的生活。
在半山园东北不远的地方有座叫定林庵的佛寺,是王安石经常去的地方。每次王安石想去,就骑上一头小毛驴出发,畅游在古道上,也是一种怡然自乐的情趣。经常往来,王安石便与定林庵中的寺僧成了好朋友,他们见王安石常来,十分辛劳,便准备了一座房舍供他读书、著述和休憩。
一次,当时著名书画家米芾来定林庵探望王安石,王安石非常高兴,二人品茗笑谈,十分欢悦。由于米芾本人非常幽默,他诙谐地对王安石说:“听说老相公正在编一部《字说》,我曾听人巧借元稹《莺莺传》赋一字谜,久思不得其解,想当面求教,”接着吟道:“莺莺小姐去上香,香头插在案几上。远看好似张秀才,近看却是一和尚。”
米芾俏语连篇,王安石听后哈哈大笑,旋即捋须回曰:“老夫日日相见,岂然不知!”原来米芾出的谜语谜底是一个“秃”字。