Так гордость нашей секретной службы Рамзай попал в число сомнительных и ненадежных. Мнение «вождя народов» дамокловым мечом висело над Разведуправлением. Непосредственные руководители Зорге переносили оценку Сталина на свои отношения с разведчиком. Информация Рамзая не использовалась. Были вдвое сокращены и без того скромные ассигнования на работу токийской резидентуры. Она отвлекалась на выполнение второстепенных заданий, на бесконечные проверки и перепроверки полученных материалов. В конце концов руководство Разведуправления приняло решение отозвать Зорге из Японии. Его донесения генерал Голиков перестал докладывать Сталину.
Зорге чувствовал, как вокруг него все туже сжимается не только удавка японской контрразведки, но и кольцо подозрений Центра. Представляете, как ему было тяжко и обидно. Ну хорошо, пусть японцы ведут охоту — это, в конце концов, неизбежно и понятно. Но свои? За что? Миф о том, что Зорге был агентом-двойником, сочиненный в кремлевских кабинетах и подхваченный угодниками на Знаменке и Лубянке, продержался довольно долго — до первой половины шестидесятых годов. С этой гнусной мистификацией было покончено, когда Зорге вернули из небытия и сделали Героем Советского Союза. В это время достоянием журналистов и исследователей стал рассекреченный документ из архива ГУ Генштаба, в котором упоминалось, что руководство военной разведки, конкретно ее начальник армейский комиссар 2-го ранга Ян Берзин, разрешило Рамзаю снабжать по своему усмотрению информацией о положении в Японии, японо-немецких отношениях, действиях японской армии в Китае, а также политическими и экономическими обзорами о развитии событий на Дальнем Востоке и районе Тихого океана германскую военную разведку и контрразведку — абвер, внешнюю разведку гитлеровской Службы безопасности, международный отдел нацистской партии и дипломатическое ведомство «великогерманской империи». Делалось это для того, чтобы укрепить прикрытие своей главной деятельности — сбор секретных данных для советской военной разведки.
Следовательно, немецкие спецслужбы не знали, что токийский корреспондент крупной германской газеты «Франкфуртер цайтунт» — сотрудник советского военного разведцентра, и считали, что Зорге работает только на них. А что из этого следует? Да то, что Рамзай никогда не был агентом-двойником и тем более слугой трех и более господ, как утверждали некоторые недобросовестные журналисты. Что это так, убедительно доказывает документ из архива штаба рейхсфюрера СС Генриха Гиммлера. Это письмо, которое значится под номером 104/42 с пометкой «государственная тайна», подписанное лично Гиммлером. 27 октября 1942 года его направили нацистскому министру иностранных дел Иоахиму фон Риббентропу.