Когда Эйвери Брэндедж вернулся в США, то стал всех подряд заверять, что для бойкотирования Берлинских игр не было пи причин, ни поводов. 26 сентября 1934 года его доклад заслушивал Американский олимпийский комитет. Еще не так давно Густав Кирби, настойчиво требовавший отказаться от участия в Олимпиаде 1936 года изменил свою позицию самым кардинальным образом. Оп заявил: «Я полагаю, что Германия будет придерживаться всех своих обещаний. Из сообщения мы узнали, что она более не намерена сворачивать с курса, который был взят». Не менее восторженные слова себе позволял и генерал Шеррил. Он полагал, что именно американские спортсмены заставили национал-социалистов изменить если не отношение, то хотя бы условия жизни евреев. Не было ничего удивительного в том, что после этих слов все восемнадцать членов Американского олимпийского комитета единодушно проголосовали за участие сборной США в Олимпиаде 1936 года. Аналогичное решение было принято и по вопросу об участии в зимних Олимпийских играх, которые в феврале 1936 года должны были стартовать в Гармиш-Партешенрхене. После этого Теодор Левальд сделал «реверанс». В сообщении, адресованном АОК, он заявлял: «Олимпийские игры нельзя считать в полной мере таковыми, если бы в них не принимали участие американские спортсмены». Но не стоило полагать, что требования организовать бойкот сразу же утихли. В день возвращения в США Эйвери Брэндедж получил письмо от Сэмюеля Уптермейера, возглавлявшего так называемую «Антинацистскую Лигу». В письме говорилось: «Участие в этих играх нарушает экономический бойкот и культурную изоляцию, которые весь цивилизованный мир хочет использовать для борьбы с озверевшим режимом. Ни один обладающий чувством собственного достоинства еврей, в какой бы стране мира он ни проживал, не позволит ссбе прибыть в нацистскую Германию». Деятельность «Антинацистской Лиги» поддерживал Эдмунд Селлер, сенатор от демократов. Он заявил публике, что «Брэндедж оказался в силках, расставленных устроителями состязаний в рейхе, — решение было принято еще до того, как он приплыл в Германию».
Если же оценивать ситуацию 1934 года в целом, то протесты против участия в Олимпиаде и призывы к ее бойкоту были спорадическими. Тем не менее, вопреки тому, что Американский олимпийский комитет принял однозначное решение, из Любительского спортивного союза США все еще раздавались голоса, заявлявшие, что тема не была исчерпана. Между тем Эйвери Брэндедж решил оставить пост главы этой организации, который он занимал шесть лет (по тем временам — немалый срок). На съезде союза, который проходил в Майами, он решил передать президентство бывшему нью-йоркскому судье Джереми Махони. Забегая вперед, можно утверждать, что Брэндедж просчитался: долгие полтора года ему придется постоянно отражать атаки «законника». Накалялась обстановка и в Великобритании.