Но сотрудникам токийской резидентуры нелегко было перестраиваться. Опытные работники, такие, как Росовски, помнили другие времена.
Сразу же после оккупации на Японские острова высадилась большая группа сотрудников американских специальных служб. Поговаривали даже, что подлинное правительство Японии в период оккупации находилось в бывшем здании пароходной компании «Нихон юсэн биру», где разместились основные подразделения Джи-2 — 2-го отдела штаба оккупационной армии, занимавшегося разведкой и контрразведкой, и штаб армейской контрразведки Си-Ай-Си, пользовавшейся самостоятельностью благодаря возможности выхода наверх, прямо в Вашингтон. Джи-2 имел в своем распоряжении специальный отряд Си-Ай-Эс — секцию гражданской разведки, которая участвовала в выработке политики. Кроме того, в порту Йокосука расположилось Оу-Эн-Ай — управление военно-морской разведки. На всех военно-воздушных базах действовала Оу-Эс-Ай — контрразведка ВВС. Отдел гражданской цензуры контролировал всю корреспонденцию в стране, прослушивал телефонные разговоры. В те времена японцы получали заклеенные полоской целлофана конверты со штампом «вскрывалось».
Потом место армейских разведчиков заняли сотрудники образованного в 1947 году Центрального разведывательного управления, которым была предоставлена полная свобода действий. Пребывание в Японии работников управления было формально узаконено в одном из японо-американских соглашений. Подпункт «Д» третьего пункта 7-й статьи этого документа гласил: «Персонал второй категории в соответствии с международным обычаем признается обладающим привилегиями и свободой, установленными для определенных категорий в посольстве их страны. Правительство Соединенных Штатов в отношении персонала второй категории может отказаться от регистрационных номерных знаков, установленных для дипломатических машин, от внесения в списки дипломатического корпуса, от общественных почестей и других привилегий и почестей, связанных с положением дипломата».
В бедствовавшей, тяжело оправляющейся от военной разрухи Японии американцы легко находили людей, готовых служить им за полновесные доллары. Сотрудники ЦРУ не знали никаких проблем. Они подключались к телефонам политических деятелей, внушавших им сомнения. Росовски вспомнил, как в 1960 году, выложив немалую сумму в долларах, управление помешало переизбранию в парламент депутата оппозиции, который возглавил демонстрацию против визита в Токио тогдашнего президента США Дуайта Эйзенхауэра.
В те времена второй отдел главного полицейского управления Японии раз в неделю передавал токийской резидентуре ЦРУ сводку информационных материалов о положении в стране.