南京观音庙有个荷花池，池中的荷花开得很旺盛。从清虚观回来后，徐炳文经常往观音庙跑，说是去那儿欣赏荷花。
但徐炳文去看荷花的时间选得很怪，他不挑晴天也不挑阴天，专挑大雨滂沱的时候。更蹊跷的是，每次看荷花，徐炳文都要站在南面的山墙下。他认为，从这儿远眺荷花池，看到的景色最美。
一个乌云密布的黄昏，徐炳文轻车简从，又来到了观音庙。进庙后他直奔魁星殿，站在南面的山墙下欣赏荷花。此时天上的乌云越聚越多，不一会儿雷声隆隆，下起了瓢泼大雨。
雨越下越大，徐炳文举着伞，出神地站在山墙下。就在这当儿，忽听有人喊：“徐大人，冒雨赏荷，真是好雅兴啊！”徐炳文扭头望去，见一个穿蓑衣的银须老者正朝自己走来。等那人靠近了，徐炳文才看清，来人是兵部侍郎潘寿年。徐炳文怕潘寿年也来山墙下驻足，赶忙抢前几步拦住了他：“雨下得这么大，我想到方丈室喝茶休息，潘兄陪我一起去那儿坐坐吧。”说着，他拉起潘寿年，快步朝方丈室走去。
听说两位大臣来访，观音庙的方丈赶紧捧出上等好茶，陪着两位大官边喝边聊。
聊了约一炷香的工夫，潘寿年突然一拍大腿，着急地说：“哎哟，我把一件宝贝忘在轿子里了！”说着，他冲徐炳文和方丈拱拱手，披上蓑衣匆匆出门去了。
徐炳文和方丈继续喝茶闲聊，等潘寿年回来。可是，等了约半个时辰，仍不见潘寿年露面。徐炳文和方丈都觉得奇怪，正想派人去找时，忽听远处传来“轰隆”一声巨响。紧接着，有人惊恐地高喊：“不好了，墙塌了，压住人啦！”徐炳文和方丈吓了一跳，立刻出门查看。
倒掉的是南面的山墙，就是徐炳文刚才站着看荷花的那个位置。此时，山墙已变成一堆瓦砾。据当时正在附近撒尿的小和尚说，他看见一个穿蓑衣的老头被压在了瓦砾下。听了这话，徐炳文和方丈脸色陡变，急忙派人挖掘瓦砾。
瓦砾被挖开后，潘寿年血肉模糊的身体露了出来，徐炳文伸手在他鼻尖试了试，发现已没有呼吸。
潘寿年在观音庙看荷花，被突然倒塌的山墙活活压死。这个消息迅速传遍了南京城。朱元璋闻讯，在朝堂上挤出了几滴眼泪，随后他颁下圣旨，赐给潘家五百两抚恤金。满朝文武对此羡慕不已，他们并非眼馋那五百两银子，而是妒忌潘寿年有了个好结局，潘家老小从此可以过安生日子了。
和其他大臣不同，徐炳文心里只有懊悔，懊悔寻死的良机被潘寿年抢了去，自己则竹篮打水一场空。原来，徐炳文经常冒雨去观音庙看荷花，那正是赛诸葛的授意，目的是伺机“意外身亡”。
有一回，赛诸葛去观音庙，偶然发现南面的山墙岌岌可危，料定再有几场暴雨就会倒塌。他还未来得及告知方丈，便遇徐炳文来讨寻死良策。赛诸葛算得没错，可惜半路杀出个潘寿年。徐炳文更怀疑潘寿年早有预谋，故意去危墙下找死，他这么做，十有八九也是为了丢卒保车。