После того как Кокс наговорил голландцам грубостей, он собрал своих соотечественников для обсуждения вопроса о противозаконном захвате английского судна. 10 августа английские купцы решили, что вопрос достаточно серьезный и необходимо известить о нем самого сёгуна. Постановили, что Кокс и Нельсон должны отправиться в Эдо и подать жалобу лично Хидэтада. В то же время следовало сообщить о происшедшем Адамсу, который ничего не знал о преступлении, совершенном голландцами против его страны. Как раз в то время Адамс отправился ко двору сёгуна вместе с несколькими голландскими купцами, чтобы помочь им устроить дела. Как честный англичанин, он должен был бы выразить свое негодование и немедленно порвать связи с недругами. Поэтому Кокс с товарищами решили, что нужно направить Адамсу письмо с объяснением происшедшего, потребовав, чтобы он оставил голландцев и, дождавшись Кокса и Нельсона, помог им подать жалобу сёгуну.
Несмотря на срочность дела, Кокс и Нельсон отбыли из Хирадо только 23 августа и лишь 1 сентября, находясь еще в пути, получили ответ Адамса на свое экстренное письмо. Содержание письма удивило и возмутило их, потому что Адамс отказывался покинуть голландцев, заявляя, что он больше не служит в Ост-Индской компании и может теперь поступать так, как ему заблагорассудится. Более того, он совершенно искренне убеждал их, что если они все же прибудут ко двору и подадут жалобу на голландцев, то тем самым навлекут на себя дополнительные неприятности. Поэтому он советовал им вернуться в Хирадо и забыть о происшедшем…
Само собой разумеется, что Кокс и Нельсон его не послушались. С грустью признав, что англичанин полностью «оголландился» (по словам Кокса), каждый из них лично написал Адамсу письмо, еще раз убеждая его расстаться с голландцами и вести себя, как подобает истинному англичанину, помочь своим соотечественникам в устройстве дела при дворе. Тем временем они продолжали свой путь и по странной иронии судьбы 3 октября встретили отряд голландских купцов, возвращавшихся в Хирадо. Встреча произошла милях в 20 от Эдо. При виде едущих верхом навстречу им двух англичан голландцы, которым Адамс уже поведал о захваченном английском судне и о Коксе и Нельсоне, отправившихся к сёгунскому двору с жалобой, не знали, что и сказать. Кокс и Нельсон помогли им выйти из неловкого положения, удостоив лишь коротким приветствием. Обменявшись с голландцами всего несколькими словами, англичане продолжили свой путь.
Вскоре после этого им повстречался и сам Адамс. Он специально выехал из Токио навстречу соотечественникам, но дипломатично выжидал, пока они проедут мимо голландцев. Кокс и Нельсон увидели его на рассвете следующего дня после встречи с голландцами, и хотя Кокс, который обычно во всех подробностях описывал события дня в своем дневнике, странным образом ничего не упомянул о встрече с Адамсом, нетрудно себе представить те резкие слова, которые были высказаны, и ту напряженную атмосферу по пути в Токио — теперь они путешествовали втроем.