沒有想到，像吳晗這樣一貫緊跟的人，也會身遭不測之禍。1962年以後有段時間，毛澤東突然鼓吹起了海瑞精神。胡喬木將此信息帶給了吳晗，因為吳是明史專家，就在報上發表了幾篇海瑞的文章。馬連良想排個海瑞的戲，讓吳晗執筆編了個海瑞罷官，這戲當時許多人說好。但後來文革開始後，成了文革的導火線。

文化大革命開始後，吳晗屢遭批鬥，被打傷。後被投進監獄，遭受種種摧殘和迫害，他被打傷得很厲害，忍受着巨大的肉體痛苦和精神痛苦。肉體痛苦因為他被打傷了脅骨，打得全身青紫，當時，什麼組織都可以批判他，什麼人都可以打他鬥他。他是文革初期最有名氣的階級敵人。他沒有想到，當年，他積極地批判黨點了名的階級敵人，真是黨指向哪裏，他請批向哪裏。哪裏知道，今天革命又以他為對象了。無產階級文化大革命，不僅是一場觸及肉體的革命，也是一場觸及靈魂的革命。他想不明白，自己好端端的緊跟毛澤東，怎麼又成了兇惡的階級敵人了？

吳晗挨批判還不算，他的莫須有的罪名侵害了全家。他的夫人袁震也被送去「勞改」，袁、吳二人於1969年先後含冤而死。他們的女兒小彥深受刺激，精神失常，後被抓進監獄，也於1976年去世。吳晗一家四口，竟死了三個，僅兒子吳彰倖存。真是造孽啊！