Кроме того, и это является, пожалуй, не менее важным с психоаналитической точки зрения, в типичных представлениях об асексуальном детстве действенным оказывается один из психических феноменов, который ранее не привлекал к себе внимания, исследователей. Речь идет об инфантильной амнезии, утрате памяти, неспособности вспомнить детские переживания, охватывающие, по мнению Фрейда, первые годы жизни ребенка до шести или восьми лет. В этот ранний период жизни ребенок испытывает разнообразные чувства по отношению к окружающему его миру, включая своих родителей, и по-своему проявляет любовь, ненависть, ревность и другие страсти души. Однако, став взрослым, человек забывает об этом и фактически не знает, с какими переживаниями ему пришлось иметь дело в детстве. И хотя, казалось бы, в период раннего детства память ребенка наиболее восприимчива к различного рода впечатлениям, тем не менее в памяти взрослого человека не сохраняется ничего, что было связано с его детскими переживаниями. Кроме отдельных, не связанных друг с другом и чаще всего непонятных отрывков воспоминаний.
По выражению Фрейда, находящийся в резком противоречии с предрассудком асексуальности детства период жизни укрывается затем у большинства людей «амнестическим покрывалом», разорвать которое по-настоящему может только аналитическое исследование. Это странное психическое явление соотносилось им не с потерей памяти как таковой, а с так называемой инфантильной амнезией. Она во многом напоминает амнезию невротиков, которая связана с механизмами работы психики, не допускающими в сознание больного материал его собственных переживаний, который вытесняется в бессознательное.
Проведя параллель между инфантильной и истерической амнезией, основатель психоанализа тем самым как бы проложил путь для сравнения душевной жизни ребенка и невротика. И коль скоро причины невротических заболеваний усматривались им в сексуальности, имевшей место в детстве и как бы вновь возвратившейся к человеку позднее, то перед Фрейдом встал вопрос о том, нельзя ли рассматривать инфантильную амнезию с точки зрения сексуальных переживаний детства. Ответ на этот вопрос способствовал психоаналитическому объяснению и инфантильной амнезии, и детской сексуальности.
В период возникновения психоанализа Фрейд высказал свои догадки о значении детского возраста для понимания причин возникновения неврозов, связанных с неудовлетворенной сексуальностью. Позднее в работе «Три очерка по теории сексуальности» он подробно изложил свои взгляды на этот вопрос, обратив особое внимание на различного рода перверсии и проявление сексуальности детей в раннем детстве. Данная работа вызвала шок среди тех, кто придерживался традиционной точки зрения на детство как асексуальный период развития ребенка. Идеи же Фрейда об инфантильной сексуальности, послужившие толчком для последующих психоаналитических исследований в этой ранее мало изученной сфере научного знания, вызвали среди многих ученых и представителей различных слоев общества резкую критику, отголоски которой дошли до наших дней.