Ярдли несколько раз приезжал из Вашингтона в родной Уортингтон. Во время одного из своих приездов он женился на соседской девушке Хейзел Милан, которая была на несколько недель его старше. Отец Хейзел Абрам Милан владел мебельным магазином и играл видную роль в общественной жизни Уортингтона. После свадьбы Хейзел уехала вместе с Гербертом жить в Вашингтон.
В Вашингтоне постоянным местом работы Ярдли стала комната № 106 в здании государственного департамента США по соседству с Белым домом. Позднее Ярдли описал ее так:
«Просторная комната с высоким потолком своими окнами выходила на южную сторону Белого дома. Подняв глаза от бумаг на рабочем столе, я мог видеть, как ежедневно играл в теннис с членами своего кабинета министров недавно избранный президент Рузвельт.
Вдоль одной из стен комнаты стоял длинный телеграфный стол со стрекочущими резонаторами и клопферами[28]. Шкафы с выдвижными ящиками для хранения копий текущих телеграмм почти блокировали собой вход. В центре комнаты располагались два огромных письменных стола, за которыми несколько клерков листали кодовые книги и быстро что-то строчили, время от времени прерываясь, чтобы закурить сигарету. Стук пишущих машинок, которые позволяли одновременно печатать по пятнадцать копий документа, смешивался с приглушенными щелчками телеграфных аппаратов. На стенах были развешаны старомодного вида полки с переплетенными копиями дипломатических и консульских телеграмм со всего мира. В углу стоял огромный сейф, его дверцы были слегка приоткрыты.
В комнате царило приподнятое настроение, и вскоре я почувствовал себя как дома. Однако меня озадачивал будничный вид этих перегруженных работой шифровальщиков. Через их руки ежедневно струился поток исторических событий, которые заботили их не больше, чем результаты футбольных матчей».
Ярдли же, напротив, очень интересовался историей. В ночную смену работы было поменьше, и Ярдли с удовольствием слушал байки дипломатов со стажем об их похождениях– дипломатических и любовных. Ярдли особенно нравился Уильям Дойл, начальник латиноамериканского управления. Он очаровывал Ярдли рассказами о махинациях в Латинской Америке. Многочисленные подтверждения рассказам Дойла Ярдли потом легко находил в архивах дипломатических телеграмм. Разоблачение этих махинаций немедленно положило бы конец карьере Дойла, и Ярдли начал всерьез задумываться, насколько защищены были тексты телеграфных депеш от посторонних глаз. Какова была стойкость американских дипломатических шифров? Ведь другие страны вполне могли заниматься их взломом. А почему в США отсутствовало собственное правительственное ведомство, которое читало иностранные шифровки?