Расставаясь с Трейси, Аппелем и Блекберном, Ярдли оставил им свой телефон, сказав, что готов оказать помощь ФБР в любое время и в любом месте. Ярдли никто не перезвонил.
Заявление Ярдли об обретенной независимости основывалось на денежной сумме, которую он скопил в Канаде. Эта сумма очень быстро таяла. Ярдли привык тратить деньги с такой же скоростью, с какой зарабатывал. А по возвращении из Канады их приток совсем прекратился. Попытки заработать на написании газетных статей и сценариев провалились. В отчаянии Ярдли написал Баю: «По крайней мере, я могу утешаться мыслью о том, что при мне никого разгрома в Перл-Харборе не случилось бы!»
Ярдли попытался завязать отношения с нью-йоркским архитектором Росарио Канделой, который был криптологом-любителем и в 1938 году на личные деньги издал собственную книгу по криптологии. Но из этого тоже ничего не вышло.
15 марта 1942 в надежде подзаработать Ярдли приобрел нью-йоркский ресторан и назвал его «Ридо» в честь озера в Канаде. Одновременно он вознамерился переиздать «Американский Черный кабинет» в бумажном переплете. Поначалу дело складывалось так, что государственный департамент не будет возражать против переиздания, если Ярдли внесет в свою книгу некоторые изменения. Но в апреле 1942 года из государственного департамента пришел официальный ответ, который гласил, что «после тщательного рассмотрения вопроса несколькими правительственными ведомствами, обеспокоенными вопросами соблюдения государственной тайны», было единогласно решено, что переиздание и распространение этой книги в нынешних условиях не отвечает интересам национальной безопасности.
Летом 1942 года военная разведка заподозрила Ярдли в прогерманских настроениях. 6 августа 1942 года в «Ридо» был послан соглядатай Фредерик Теаан, чтобы разведать обстановку. Его отчет гласил, что беседы посетителей «Ридо» были вполне обычными, и что никого подозрительного среди них заметить не удалось. В августе 1942 года Теаан приходил в «Ридо» еще одиннадцать раз в различное время днем и ночью. В перерывах между посещениями «Ридо» он изучил личные дела Ярдли в государственном департаменте и военном министерстве, поискал материалы на него в ФБР, министерстве юстиции и нью-йоркской полиции. Теаан внимательно ознакомился с регистрационными бумагами, которые Ярдли оформлял при открытии своего ресторана, от корки до корки прочел «Американский Черный кабинет», поговорил с соседями Ярдли и получил сведения о его банковских операциях. Никаких оснований для предъявления обвинений выявлено не было. 7 сентября 1942 года Теаан отправил рапорт с рекомендацией прекратить слежку за Ярдли.