冯梦龙的《情史类略》就描写了一个关于徐渭的故事，并且这个故事还涉及某些真实的节点，故事真实性不可性，但是读来还是很有趣的。故事是这样说的，说徐渭中举之后，就到了胡宗宪幕下做事，胡宗宪很信任宠爱他。徐渭有一次出游，到了某一寺庙中，里面的僧侣对徐渭很不礼貌，徐渭就记下了。晚上徐渭留宿妓家，将那妓女的睡鞋偷偷藏在袖中。第二天一早就去见胡宗宪，并对胡宗宪说这个鞋子是他偶然在那寺庙中捡到的。胡宗宪听了之后，大怒，也不详查，当即就捉拿了寺中僧侣几人，砍了头。