Генри Джеймс родился 15 апреля 1843 г. в Нью-Йорке. Отец будущего писателя, Генри Джеймс-старший, унаследовал от своих предков солидное состояние и мог себе позволить заниматься теологией и философией. Дом Джеймсов по справедливости считался одним из самых просвещенных домов Нью-Йорка. У них гостил великий английский писатель Уильям Теккерей, когда приезжал в Америку для чтения лекций. Здесь часто бывал поэт и философ Ральф Эмерсон. Итогом философских занятий Генри Джеймса-старшего стал труд, трактующий философию шведского ученого и мистика Эмануэля Сведенборга. В Америке эта книга не имела успеха, зато много лет спустя она привлекла внимание Льва Толстого.
Главным делом жизни Генри Джеймс-старший считал воспитание своих детей, а их в семье было пятеро – четыре мальчика и девочка. Дети воспитывались в атмосфере религиозных и философских споров, нравственных исканий, презрения к царившему в стране культу бизнеса и наживы. Они много читали, ходили в театр, бурно обсуждали прочитанное и увиденное. Старший брат будущего писателя, Уильям Джеймс (или Джемс, как его фамилию часто писали в России), впоследствии стал выдающимся философом и психологом, одним из основоположников прагматизма. Стремясь дать детям разностороннее образование, отец много путешествовал с семьей по Европе. Юный Генри учился в школах Парижа, Женевы, Бонна, занимался с домашними учителями, в совершенстве овладел несколькими иностранными языками. Значительное влияние на его образование оказало посещение парков и музеев Европы, наблюдение за европейскими нравами, столь отличными от нравов Америки середины XIX века.
Особенно резко этот контраст был заметен в Нью-Йорке. В 1860 г., вернувшись из очередной поездки, семья решила перебраться в Новую Англию – сначала в небольшой курортный городок Ньюпорт, а затем в Бостон. Бостон тогда был культурной столицей Америки, самым «европейским» из американских городов. Много лет спустя Генри Джеймс в своем романе «Бостонцы» (1886) с ностальгией будет вспоминать «век простой жизни и высокой мысли, чистых идеалов и честного труда, нравственного горения и благородных исканий».
В 1861 г. при тушении пожара Джеймс получил серьезную травму позвоночника. Это «ужасное, хотя и незаметное увечье» помешало ему принять участие в Гражданской войне, хотя два его младших брата сражались на стороне северян. По мнению биографов писателя, эта травма стала причиной мучительных переживаний и наложила отпечаток на всю его последующую жизнь. В 1862 г. он поступил в Гарвардскую школу права, однако вскоре бросил учебу и занялся литературной деятельностью. В 1865 г. был напечатан его первый рассказ.