僅過一年，羅總就大難降臨。他驕狂的性格決定了他的命運，聶、葉、徐三位老帥群起攻之，說他獨斷專行，連他最信任的楊成武，也打出翻天印，說他是霸王。葉劍英、葉群、楊成武一起飛到杭州劉莊，向毛澤東告狀，說羅與賀龍勾結。周恩來擔心羅要謀反，有野心，到處部署對羅進行監控。

毛和林商量，給羅搞了一次大批判。1965年12月8日，在上海召開中央政治局擴大會，由鄧小平主持，沒讓羅瑞卿到會場，卻給羅一生算了總賬，會議結束回到北京，不滿背靠背批羅的聶榮臻，又搞了一個陸海空三軍師以上幹部的大會，繼續對羅揭批，氣勢恢宏，我們叫三軍升帳。1966年3月18日，斗得羅不想活了，從他家二樓的平台上，往下縱身一跳，兩隻腳掌同時着地，骨折。

賀龍嘲笑他：“你羅長子跳樓都不會，哪有腳先向下的，要頭朝下跳嘛。”

邱會作說他是順牆出溜下來的。

葉帥賦詩云：“將軍一跳身名裂”。

文革開始，羅瑞卿被捆綁進了“彭（真）陸（定一）羅（瑞卿）楊（尚昆）反黨集團”，給文革祭旗。