到了《寒花盦随笔》《缺名笔记》一些人的时代，便索性把“或”字去掉。一直到近人蒋瑞藻《小说考证》还认定是弇州之作而不疑：
《金瓶梅》之出于王世贞手不疑也。景倩距弇州时代不远，当知其详。乃断“名士”二字了之，岂以其诲淫故为贤者讳欤！（《小说考证》二，九六页）
其实一切关于《金瓶梅》的故事，都只是故事而已，都不可信。应该根据真实史料，把一切荒谬无理的传说一起踢开，还给《金瓶梅》一个原来的面目。
第一，我们要解决一个问题，要先抓住它的要害点，关于《清明上河图》，在上文已经证明和王家无关。次之就是这一切故事的焦点——作《金瓶梅》的缘起和《金瓶梅》的对象严世蕃或唐荆川之被毒或被刺。因为这书据说是作者来毒严氏或唐氏的，如两人并未被毒或无被毒之可能时，这一说当然不攻自破。
甲、严世蕃是正法死的，并未被毒，这一点《寒花盦随笔》的作者倒能辨别清楚。顾公燮便不高明了，他以为王忬死后世贞还去谒见世蕃，世蕃索阅小说，因作《金瓶梅》以讥刺之。其实王忬被刑在嘉靖三十九年（1560）十月初一日，殁后世贞兄弟即扶柩返里，十一月二十七日到家，自后世贞即屏居里门，到隆庆二年（1568）始起为河南按察副使。另一方面，严嵩于四十一年五月罢相，世蕃也随即被刑。王忬死后世贞方痛恨严氏父子之不暇，何能觍颜往谒贼父之仇？而且世贞于父死后即返里屏居，中间无一日停滞，南北相隔，又何能与世蕃相见？即使可能，世蕃已被放逐，不久即死，亦何能见？如说此书之目的专在讽刺，则严氏既倒，公论已明，亦何所用其讽刺？且《四部稿》中不乏抨责严氏之作，亦何庸写此洋洋百万言之大作以事此无谓之讽刺？