Отказавшись вернуться из-за грозившей ему опасности быть расстрелянным, он после смерти Сталина попался на удочку ложных обещаний амнистии и приехал в Москву вместе с женой Эльзой. Штейнберг получил пятнадцать, а она — десять лет за государственную измену.

Как насмешка в приговоре Военной коллегии Верховного суда по его делу фигурировала формулировка: суд не считает необходимым применить к нему за измену Родине высшую меру наказания — смертную казнь в связи с тем, что государству не нанесен его действиями реальный ущерб и он возвратил денежные средства, выделенные ему для оперативных целей в 1937 году.

Через три месяца после моего прибытия во Владимирскую тюрьму на свидание со мной жена привезла детей, мудро решив не показывать им отца, пока он был не в лучшей физической форме. У меня задрожали руки, и я едва владел собой, когда она вошла. Начальник тюрьмы полковник Козик разрешил два дополнительных свидания с женой, кроме положенного одного в месяц. Перед своей отставкой в 1959 году он устроил мне свидание у себя в кабинете с Александром, мужем свояченицы, который ввел меня в курс того, что происходило в МВД и КГБ.

Информация о том, кто находится у власти, а кого отправили в отставку, инициативы нового председателя КГБ Шелепина по расширению операций советской разведки за рубежом дали мне надежду, что я мог бы быть полезен новому руководству благодаря своему большому опыту и поэтому меня могут амнистировать и реабилитировать, как это произошло с генералами и офицерами, выпущенными Сталиным и Берией в 1939 и 1941 годах.

Несмотря на мое ходатайство оставаться в одиночной камере, через год мне подсадили сначала Брика, затем Штейнберга, а позже бургомистра Смоленска при немцах Меньшагина.

Наши отношения были вежливыми, но отчужденными. Хотя все они были интересные люди, но их прежняя жизнь и поверхностное знание нашей действительности меня раздражали, поэтому мы не могли сблизиться.

После полугода пребывания во Владимирской тюрьме я начал бомбардировать Верховный суд и прокуратуру прошениями о пересмотре моего дела. От жены я знал, что она дважды обращалась к Хрущеву и в Верховный суд с просьбой допустить адвоката при рассмотрении моего дела. Но в этой просьбе ей было отказано.

Она показала мне копии своих ходатайств, и я послал в Москву протест, заявляя, что мой приговор не имеет юридической силы, поскольку мне было отказано в праве на защиту, а также в ознакомлении с протоколом судебного заседания, который я так и не подписывал. Это означало, что я нахожусь в тюрьме незаконно. Я получил всего один ответ, подписанный Смирновым, заместителем председателя Верховного суда, где говорилось, что оснований для пересмотра дела нет. На следующие сорок прошений ответа я не получил.