Со старшими по званию и должности вел себя достойно, как человек, знающий себе цену и требования войсковой субординации. Любил военную форму. Опрятность поражала многих офицеров — ходил всегда в наглаженных брюках, кремовые рубахи отличались новизной, как будто недавно приобретенные со склада вещевого имущества. К тому времени он был холостяком. Никогда не доводилось его видеть небритым или непричесанным. Копна все еще густых, заметно седеющих волос всегда была опрятно и модно по тем временам подстрижена. Еще бы не быть ему такой личностью. После рождения в 1926 году в Пскове воспитывался в семье военного. Отец был офицером Красной армии, участником Великой Отечественной войны, мать — дворянкой из рода Голенищевых-Кутузовых. Таким образом, Евгений приходился праправнуком М.И. Кутузова, был женат на дочери секретаря Президиума Верховного Совета СССР А.Ф. Горкина Майе Горкиной.
Ему довелось общаться во время эвакуации в Свердловске с детьми советской элиты: Галиной Жигаревой, Светланой и Василием Сталиными, Марфой Пешковой и др. Встречался и беседовал с Черчиллем и Фурцевой в Лондоне и маршалом Бирюзовым в Москве. 06 этих встречах он скупо в порывах откровения рассказывал автору, особо не углубляясь в их значимость.
Учился в ВДА (Военно-дипломатическая академия) на одном курсе с предателем Пеньковским, хотя и признался, что у него с ним было соперничество за пост старшины курса. Выбрали голосованием Пеньковского как старшего по званию, возрасту и участника Великой Отечественной войны.
К учебе Иванов всегда относился серьезно, получая дипломы об окончании вузов только с отличием: в 1947 году-Тихоокеанского высшего военно-морского училища, в 1953 году — Академии Советской армии (Военно-дипломатической академии ГРУ), в 1967 году-Академии Генерального штаба.
Смерть Сталина и приход к власти Хрущева отметились в истории Советской России переходным периодом с беспрецедентным критиканством всего того, что было сделано при прежнем руководстве. Возрос накал борьбы под политическим ковром в Кремле. Кроме того, взял разбег новый этап холодной войны, чуть было не доведший планету до третьей мировой войны. Что касается Скандинавских стран, советское руководство особенно интересовало нашу соседку Норвегию, которая являлась членом НАТО.
Свою оперативную деятельность в системе стратегической агентурной разведки Е.М. Иванов начал после окончания в 1953 году ВДА ГРУ и назначения на должность заместителя военно-морского атташе советского посольства в Норвегии. В Осло капитан-лейтенант проработал почти пять лет. В это время ему сопутствовала оперативная удача — он приобрел, а точнее, завербовал два источника из числа военнослужащих норвежской армии под названием «Феб-1» и «Феб-2», которые за вознаграждения продавали секреты НАТО и США. Такой результат молодого разведчика высоко оценил Центр.