Чаще всего Ворошилов вмешивался в музыкальные дела, в работу Союза композиторов, оперы, музыкальных театров. У него были некоторые музыкальные способности, он хорошо знал украинские народные песни и любил хоровое пение. Видимо, этого было достаточно, чтобы он возомнил себя таким же «специалистом» по музыке, каким считал себя А. А. Жданов. Ворошилов с большим старанием давал многим композиторам и интерпретаторам различные указания. Один известный артист рассказывал Д. Шостаковичу, как он однажды пел вместе со Сталиным, Ворошиловым и Ждановым. Это было после одного приема, когда все были сильно навеселе. Солисты Большого театра сопровождали пение «вождей». Сталин дирижировал, ибо и здесь он не мог позволить кому-то командовать.
Сталин в эти годы не только не считался с Ворошиловым, но часто выказывал ему пренебрежение и недоверие. Существует легенда, что в 1949 году была сделана попытка арестовать жену Ворошилова, которая, как и жена Молотова, была еврейкой. И будто бы Ворошилов схватил не то шашку, не то пистолет и выгнал из своей квартиры явившихся туда чекистов. Эта легенда не соответствует действительности. Никаких попыток арестовать жену Ворошилова не предпринималось. Но некоторые из его родственников были арестованы. К тому же сам Ворошилов все более попадал в опалу «при дворе» Сталина.
На одном из заседаний Политбюро после войны обсуждался вопрос о путях развития Советского Военно-морского флота. Это было расширенное заседание, на которое были приглашены командующие основными флотами. Как обычно, Сталин предложил высказываться всем присутствующим, оставляя за собой последнее слово. Мнение Ворошилова не совпало, однако, с мнением большинства. Завершая прения, Сталин не просто отверг предложения Ворошилова, но при этом сказал: «Не понимаю, для чего хочется товарищу Ворошилову ослабить Советский Военно-морской флот». Он повторил эту зловещую фразу еще два раза. После заседания все его участники пошли по приглашению Сталина смотреть кинофильм «Огни большого города», который Сталин уже много раз видел. В небольшом просмотровом зале стояли столики с закуской. Никто из присутствующих не сел уже за столик к Ворошилову, он оставался в одиночестве. Когда после окончания фильма зажегся свет, Сталин обернулся и, увидев одиноко сидящего Ворошилова, неожиданно встал и, подойдя, положил ему руку на плечо. «Лаврентий, – обратился Сталин к Берии. – Надо нам лучше заботиться о Ворошилове. У нас мало таких старых большевиков, как Клим Ворошилов. Ему нужно создать хорошие условия». Все молчали, ибо трудно было понять, почему именно к Берии обращался Сталин с предложением «позаботиться о Ворошилове». Заместитель командующего ВМФ СССР И. С. Исаков, присутствовавший на этом заседании Политбюро, записал свои впечатления сразу же по приходе домой.
Сталин не только отдалил от себя Ворошилова, но неоднократно выражал ему в присутствии других членов ЦК политическое недоверие и даже заявлял иногда, что Ворошилов является… английским шпионом. Нередко его не приглашали на заседания Политбюро. Были случаи, когда Ворошилов, узнав о предстоящем заседании, звонил личному секретарю Сталина А. Поскребышеву и униженно просил: «Узнайте, пожалуйста, можно ли мне приехать на заседание Политбюро?»
Тем не менее в 1952 году Ворошилов председательствовал на последнем заседании XIX съезда партии и закрывал этот съезд. Ворошилов был избран в состав расширенного Президиума ЦК КПСС и в состав Бюро Президиума из девяти человек. До конца жизни Сталина только двое членов высшего руководства партии обращались к нему на «ты» – Молотов и Ворошилов. При этом Ворошилов часто называл Сталина Коба.
Ворошилов – Председатель Президиума Верховного Совета СССР
Сразу после смерти Сталина Ворошилов принял участие в совещаниях высших должностных лиц партии и государства, на которых шла речь о распределении власти. В это время пост Председателя Президиума Верховного Совета занимал Н. М. Шверник. Он не пользовался большим влиянием и даже не был после войны полноправным членом Политбюро, но лишь его кандидатом. До войны Шверник возглавлял советские профсоюзы. Теперь было решено снова назначить его Председателем ВЦСПС. На пост главы Советского государства, то есть Председателя Президиума Верховного Совета СССР, был избран Ворошилов.