В итоге в министерстве иностранных дел Канады решили, что вопросы сотрудничества с Англией имели значительно большее значение, чем сохранение Ярдли на посту начальника Исследовательского отдела. Это решение еще больше окрепло после того, как Моборн был освобожден от занимаемой должности в августе 1941 года до истечения срока своих полномочий. К тому же Деннистон пообещал Макензи прислать в Канаду из Англии опытного криптолога, но только после того, как Ярдли покинет канадскую территорию.
Было предложено не продлять полугодовой контракт с Ярдли, который истекал 9 декабря 1941 года. Предложение поддержали далеко не все, кто имел отношение к работе Исследовательского отдела. На очередном заседании специального наблюдательного комитета Макензи сказал, что принятие этого предложения «нанесет урон нашей деятельности в силу надуманных причин, связанных с дипломатией». Мнение Макензи не было принято во внимание, и 21 ноября 1941 года Ярдли было объявлено, что по истечении контракта ему придется оставить должность начальника Исследовательского отдела.
Ярдли был очень расстроен. Он настаивал, чтобы ему объяснили причины, по которым его увольняли. Ведь под руководством Ярдли Исследовательский отдел смог добиться отличных результатов. Ему сказали, что по целому ряду причин было решено, чтобы Исследовательский отдел всецело контролировался и управлялся гражданами Канады. И больше к этому добавить было нечего. Тогда Ярдли обвинил своих канадских работодателей в том, что они пригласили его приехать на работу в Канаду, заставили его поделиться своими профессиональными навыками и имевшимся опытом в области дешифрования, а потом передали полученную от него информацию в другие руки.
Стоун посчитал, что есть какие-то более веские причины, по которым Ярдли вышел из доверия, чем история с его книгой, опубликованной более десяти лет назад. Поэтому по его инициативе 24 ноября 1942 года специальный наблюдательный комитет при министерстве иностранных дел Канады принял решение повторно рассмотреть вопрос об увольнении Ярдли. Члены комитета Лестер Пирсон и Герберт Литтл были отправлены в командировку в США, чтобы прояснить ситуацию.
Пирсон и Литтл прибыли в Вашингтон 26 ноября 1941 года. Сначала они встретились с сотрудником военно-морской разведки США Эдвардом Гастингсом, который был прикомандирован к посольству Канады в США для оперативного решения вопросов взаимодействия в области разведки между двумя странами. Гастингс сказал Пирсону и Литтлу, что американские криптологи не доверяли Ярдли, которого считали тщеславным и жадным к деньгам. По общему мнению, с технической точки зрения его криптологические способности были весьма посредственными. Гастингс добавил, что ни США, ни Англия не будут сотрудничать с Канадой в области дешифрования, пока Ярдли руководит Исследовательским отделом. Причина состояла в сильной неприязни к нему, возникшей из-за публикации «Американского Черного кабинета». И не потому, что Ярдли выдал какие-то особо охраняемые секреты. Просто ему не доверяли. А еще Гастингс заявил, что американцы были рады сплавить Ярдли в Канаду, поскольку не знали, что с ним делать в США. На это Пирсон заметил, что в своем отчете о поездке в США осенью 1941 года Робинсон и Коксетер ни словом не обмолвились о наличии признаков того, что Моборн рекомендовал Ярдли для работы в Канаде, просто чтобы избавиться от него.