1957年，劉雪庵被打成右派，由一級教授降至六級，調(diào)到圖書館當(dāng)數(shù)據(jù)員去了。但劉雪庵在逆境中并不消沉，而是堅持創(chuàng)作，他譜寫了許多歌曲和器樂曲。

如為毛主席詩詞《七律·人民解放軍占領(lǐng)南京》、《七絕·為女民兵題照》及《菩薩蠻·黃鶴樓》譜曲，還創(chuàng)作了《雷鋒組歌》，鋼琴曲《我愛北京天安門》等作品，翻譯了法國著名歌劇《卡門》的全部歌詞，奔放熱情的旋律表達(dá)他對黨和人民的熱愛。

1966年，“文化大革命”爆發(fā)后，《何日君再來》被定性為反動歌曲、黃色歌曲、漢奸歌曲，是“美麗頹廢的罌粟花”。

紅衛(wèi)兵對劉雪庵進(jìn)行毒打，他的夫人喬景云眼看丈夫就要被活活打死了，便奮不顧身地沖上去，造反派就調(diào)頭毆打喬景云，直打的皮開肉綻，后因傷勢過重告別了人世。

而劉雪庵被關(guān)進(jìn)了牛棚，后被押送到農(nóng)場勞動改造。不久就雙目失明了。

直到1979年，劉雪庵的右派問題得到了平反。但處境依然十分悲涼，據(jù)上海音樂學(xué)院教授倪瑞霖回憶：“他每天坐在特制的椅子上，椅子上挖了一個洞下放面馬桶，椅子兩個扶手中間用一根木棍擋著以免他摔下來。扶手上掛著幾個饅頭，餓了就啃兩口……”。

劉雪庵的老朋友，原蘇州市文化局局長謝孝思專程到北京看望他，簡直不敢相信，眼前這位可憐的老人就是當(dāng)年曾與冼星海一起指揮黃河大合唱而享譽天下的音樂大師？！

可是有著崇高藝術(shù)修養(yǎng)的劉雪庵，創(chuàng)作意志并未因此而消沉。他繼續(xù)創(chuàng)作和改編了大量歌曲、器樂曲、民歌等，并翻譯了俄文版的法國著名歌劇《卡門》。