徐经入狱后禁不起严刑拷打，招认他用一块金子买通程敏政的亲随，窃取试题泄露给唐伯虎。后来刑部、吏部会审，徐经推翻了自己先前的供词，说那是屈打成招，唐伯虎是无辜的。皇帝下旨“平反”。前主考官程敏政出狱后，“愤懑不平发痈而卒”——气得生疮，毒发身亡。唐伯虎出狱后，被谪往浙江为小吏，连芝麻官也算不上，他觉得这是对他的侮辱，令他感到羞耻，拒不就任。

如今看来，唐伯虎的小心脏很脆弱，禁不起打击。当然了，这件事对他的打击不小，从此他心灰意冷，“绝意仕途”，发誓一辈子不当官。回家后他借酒浇愁，游历名山大川，决心以诗文书画终其一生。后来他果然靠卖画为生，贫困交加，因常年多病，不能经常作画，老婆又离他而去，他自己又不会持家，生活非常艰难，以至于常向好友祝枝山、文徵明借钱过日子。

和唐伯虎相比，祝枝山也非浪得虚名，他家学渊源，能诗文，工书法，狂草尤其棒，颇受世人赞誉，时有“唐伯虎的画，祝枝山的字”之说。两人遭际与共，情性相投，民间流传着两人的种种趣事。