Сталин распределил роли на съезде между членами Политбюро: открыть съезд и выступить с кратким словом он предложил Молотову; закрыть съезд — Ворошилову, отказавшись взять на себя эту естественную функцию и возложив ее на двух старых деятелей партии; докладчиками давно были утверждены Маленков — по Отчетному докладу и Хрущев — по Уставу партии; Кагановичу было поручено предложить съезду состав Программной комиссии. В прениях по докладу Сталин предложил выступить Берия и мне. Я не сразу понял шахматную расстановку фигур, но потом стало ясно: Сталин хотел лишить активности членов Политбюро, ограничив их участие открытием и закрытием съезда, оглашением списка Программной комиссии, выступлением по проекту Устава партии, а нам двоим дать возможность выступить в прениях. Сталин не сомневался, что Берия будет хвалить все: и работу ЦК, и книгу Сталина. А меня, я так понял, хотел испытать. Он почему-то не предложил выступить ни Андрееву, ни Косыгину (правда, Косыгин все-таки выступил на съезде).
Если бы не это его поручение, я бы не стал выступать в прениях, поскольку он меня отвел как «неактивного члена Политбюро». Когда же он предложил мне выступить, я, конечно, не возражал, но заколебался. Как быть? Мне было ясно одно: он хочет провести свой план для моего отстранения от руководства, но у него для этого нет основательного аргумента. Он увидел, что применение ко мне определения «неактивный член Политбюро» вызвало смех у членов Политбюро. Работники партии и министры тоже знали меня как одного из самых активных членов Политбюро и относились ко мне хорошо, особенно зная мою работу во время войны.
И вот, если бы я выступил против той части доклада, где хвалится книга Сталина, или бы выступил только против положения в ней о переходе к продуктообмену, он получил бы козырь в руки для обоснования невключения меня в состав руководства партии «ввиду принципиальных разногласий». Таким образом, я бы сам вооружил его для исполнения его плана в отношении себя. Но если бы даже я вовсе умолчал эту тему в своем выступлении, он мог бы и это использовать против меня, ссылаясь на наш разговор и мое отношение к положениям книги, сказал бы, что я не согласен и что испугался открыто высказать свое мнение на съезде. Обдумав все это, я решил не давать оружия в его руки, чтобы отсечь меня от руководства. Тем более что в тот момент мне казалось, что вывод меня из руководства партии не принесет пользы делу.
Поэтому вполне законно некоторые товарищи, которые были недовольны, что именно я первым открыто выступил на ХХ съезде с критикой культа личности Сталина, критикуют мое выступление по этому вопросу на ХIХ съезде партии. Я понимаю, что допустил здесь явную ошибку. Говоря об ошибочности положений книги Сталина «Экономические проблемы социализма в СССР» на ХХ съезде, я должен был бы сказать, что мое выступление по этому вопросу на ХIХ съезде, в котором я высоко оценил книгу Сталина, по существу, не отражало моего мнения по этому вопросу — мое выступление на XIX съезде партии было дипломатическим ходом: не расходиться с руководством партии, с Политбюро, которое одобрило эту книгу. Хотя этот аргумент не вполне убедительный, но было бы более правильно, если бы я это сделал.