Он имел репутацию преданного сторонника Сталина, поддерживал его в борьбе с Троцким, а затем при укреплении власти Сталина в конце 1920-х годов. Автор книги «Сталин и Красная Армия», возвеличивающей роль Сталина в Гражданской войне. Тем не менее, известен его конфликт со Сталиным по поводу политики в Китае, а также по вопросу о немедленном исключении из ЦК Троцкого и Зиновьева. 4 июля 1927 года Молотов в письме жаловался Сталину: «Ворошилов доходит до огульного охаивания вашего руководства за последние 2 года».
В 1957 году Ворошилов по ошибке отправил поздравительную телеграмму, предназначавшуюся королеве Великобритании, королеве Бельгии, что вызвало крупный международный скандал.
«В Ворошилове он ценил личную преданность,» – говорит историк, писатель Рой Медведев. «Сталин прощал Ворошилову такие ошибки, которые любому другому стоили бы жизни».
Про Ворошилова все в сталинском окружении знали: этот человек может запросто провалить любое порученное ему дело. Тем не менее он пошёл на повышение – стал зампредом Совнаркома, то есть вице-премьером правительства! Причина в том, что диктаторы нуждаются не только в толковых исполнителях – таких как Каганович, Микоян, Устинов или Косыгин, которые могут делать дело. Им нужны и декоративные фигуры, которые своим ничтожеством оттеняли бы величественную фигуру вождя.
Семья и личная жизнь Климента Ворошилова занимали особое место в его сердце. Со своей единственной супругой он познакомился в годы ссылки в Ныробе в 1909 году. Его избранница Голда Давидовна Горбман влюбилась в Клима настолько сильно, что отказалась от собственной семьи. Дело в том, что девушка по национальности была еврейкой, но ради брака с Ворошиловым крестилась в православной церкви и сменила имя на Екатерину. Такой поступок дочери не был одобрен ее родителями, и всяческие отношения между ними прекратились. Голда Давидовна тоже была членом Партии, а позднее работала заместителем директора Музея В. И. Ленина. Так получилось, что Екатерина Ворошилова не могла иметь детей. Но ее муж ни разу не попрекнул любимую супругу. Ворошиловы усыновили мальчика-сироту Петра, а после смерти Михаила Фрунзе забрали на воспитание его детей – сына Тимура и дочь Татьяну. Существуют сведения, что приемным сыном Ворошилова называл себя и Леонид Нестеренко, профессор Харьковского политехнического института, сын сослуживца Климента по Луганскому паровозному заводу.
Все, кто близко знал семью Ворошиловых, единодушно отмечали, что в отношениях между приемными родителями и детьми царила настоящая любовь – такая же, как и между самими