說起唐伯虎，民間傳說和影視作品中演繹的形象是：“江南第壹風流才子”、“三笑點秋香”、“家有九美”等。但事實上唐伯虎並非影視作品中塑造的那樣風流倜儻，更未點秋香，他壹生坎坷。
“唐伯虎因才華出眾，與祝枝山、文徵明、徐禎卿並稱為‘吳中四才子’，也稱‘江南四才子’。他的作品以及記錄他事跡的書籍說明了他放蕩不羈的性格，但與電影最大不同的是唐伯虎的運氣很差——仕途斷送、妻子離棄、生活困苦。”
存世作品僅80多件
唐伯虎留存於世的作品並不多，國內經過專家鑒定的作品僅有80多件，還有少量流落到海外。
唐伯虎的很多作品是畫給他的老師、朋友的，他們中間有居高位者，有平民百姓，也有書畫作家。這些作品反映出唐伯虎的生活、交往，反映出他的思想、人生感悟等。比如說他早年作品與晚年作品的風格差別很大，他年輕時，躊躇滿誌，作品多用細筆;晚年時作品則側重描述壹生的遭遇，頗有看破人生的意味;到了臨終時，作品幾乎都在表達自己對人生的感慨。
科舉考試的犧牲品
唐伯虎自幼天資聰穎，過目成誦，熟讀四書五經等史籍，閑暇時也學畫山水花鳥。當時文徵明的父親文林常去唐家的酒肆喝酒，見唐伯虎稟賦和才學過人，決定讓唐寅與文徵明壹起拜吳門畫派創始人沈周為師。唐伯虎19歲時娶當地女子徐氏為妻，兩人感情甚洽。唐伯虎25歲那年家中遭遇變故，父、母、妻、妹在壹年之內相繼去世，這對他打擊很大，悲痛之余，唐伯虎更加努力讀書治學。明弘治十壹年(公元1498年)，唐伯虎29歲時參加應天府(今南京)鄉試，中解元(第壹名)，壹時聲譽鵲起。
影視作品中並沒有表現出唐伯虎進京會試遭牢獄之災壹事，但此事影響了唐伯虎壹生，使他成為科舉考試的犧牲品，從此不能參加科舉考試。
關於唐伯虎進京會試遭牢獄之災，單國霖說純屬冤案。他說，考中解元後的第二年，30歲的唐伯虎躊躇滿誌地進京參加會試，路遇同去趕考的江陰富家公子徐經，兩人相談甚洽，結成莫逆之交。這位徐經，就是後來著名的旅行家徐霞客的曾祖父。當時有壹風氣，考試前都要去拜見主考官。徐經到京城後拜見主考官程敏政，讓他為自己出壹些模擬題進行考前復習，還請唐伯虎幫他寫好了文章，恰好考試時有這篇文章。
其實主考官和出試題的人是兩碼事，試題純屬偶然碰上。這件事是同去考試的都穆在壹次吃飯中無意說給華昶聽的，華昶是壹個檢查部門的官，他跟程敏政有意見，抓住此事不放，徐經和唐伯虎兩人都鋃鐺入獄，唐伯虎在大獄中吃了不少苦頭。經過壹年多的審訊，案情不明不白，最終雖未判定唐伯虎是考場舞弊案的主犯，但幹系是擺脫不掉的。唐伯虎雖被釋放出獄，但經過這番折騰已經聲名掃地，科舉仕途已無望。朝廷革除了他的“士”籍，把他發配到浙江偏遠之地為小吏。
並未點秋香
多年前的壹部《唐伯虎點秋香》，不但火了“風流才子”唐伯虎，也火了溫柔賢淑的秋香。單國霖說，有關唐伯虎的傳說軼事，以馮夢龍的傳奇小說《唐解元壹笑姻緣》篇幅最長，此外還見諸明朝壹些不出名的文人筆記，如《蕉窗雜錄》、《皇明世說新語》、《風流逸響》等，其中的多數相關情節都為杜撰。
至於唐伯虎“妻妾成群”的傳說，單國霖說，其實唐伯虎壹生只娶了三個妻子，很可能因其續娶的夫人名叫沈九娘，可能把“九娘”附會成“九個美嬌娘”吧。“三笑點秋香”更是演繹出來的，單國強說：“秋香確有其人，她比唐伯虎大十幾歲，是當時的名妓，與唐伯虎相識，她嫁人的時候，唐伯虎曾為她創作過壹首詩。”
關於唐伯虎“江南第壹風流才子”之名的由來，有人認為，唐伯虎出於對自己才華的狂傲自負，確實刻了壹枚“江南第壹風流才子”的印章，但單國霖認為，唐伯虎“江南第壹才子”是名副其實的，他的詩、書、畫被稱為三絕，藝術造詣高超，唐伯虎才華橫溢是真的，他完全稱得起“江南第壹才子”。若說“風流”二字，也只是說唐伯虎文風飄逸，為人灑脫，落拓不羈，舉止有放浪之行，僅此而已，實際情況並不是小說和影視作品中描寫的那等“風流”。