Несмотря на успех, который принес ему этот альбом, время работы над ним Майкл Джексон называл одним из самых тяжелых периодов в своей жизни. «У меня в то время было совсем немного близких друзей, и я жил очень изолированно, — признавался певец. — Мне было так одиноко, что я выходил прогуляться по кварталу в надежде встретить кого-нибудь, с кем я мог бы поговорить и, может быть, подружиться. Мне хотелось подружиться с людьми, не знавшими, кто я. Хотелось встретить кого-то, кто стал бы моим другом потому, что я ему понравился, и потому, что ему тоже нужен друг, а не потому, что я — это я. Хотелось встретить кого-то из соседей по кварталу — уличных мальчишек, кого угодно. Успех, безусловно, приносит одиночество. Это правда. Люди думают: тебе повезло, у тебя есть все. Им кажется, ты можешь пойти куда угодно и делать что хочешь, но не в этом суть. Человек нуждается в истинных ценностях».
Бывший музыкальный критик «Los Angeles Times» Роберт Хилберн описывал свою встречу с 23-летним Джексоном как мучительную и называл певца одним из самых ранимых, одиноких и потерянных людей, которых он встречал в своей жизни. «Когда я спросил Джексона, почему он остается с родителями, а не живет в собственном доме, как его братья, — писал Хилберн, — тот ответил: „О нет. Я думаю, что умру, если буду один. Я буду так одинок. Я одинок даже у себя дома. Я сижу у себя в комнате и иногда плачу. Так трудно завести друзей, а с родителями и братьями о многом откровенно не поговоришь. Иногда я просто брожу по своему району ночью и надеюсь, что кого-нибудь встречу — просто поговорить, и все. Но кончается все одинаково — я возвращаюсь домой“».
По признанию Джексона, только на сцене он чувствовал себя замечательно: «Когда я на сцене, все в порядке. Во время выступлений я раскрепощаюсь. Я полностью владею сценой. И ни о чем больше не думаю. Стоит мне выйти на сцену, — и я уже знаю, что хочу делать, и наслаждаюсь каждой минутой. Там я бываю по-настоящему раскован. Но когда я остаюсь один в доме, где полным-полно народа, то даже несмотря на это чувствую себя одиноко. Я не жалуюсь, потому что считаю это нормальным для своей работы».
Казалось невероятным, что после выхода «Off the Wall» артист может превзойти самого себя, но прошло совсем немного времени, и он сделал это. Однако невзирая на грандиозный успех первого сольного альбома, Майкл Джексон жаждал большего. Годы спустя в одном из интервью он прокомментировал, что испытывал в то время: «Я по большому счету ставил перед собой цели, что я хочу сделать как артист, и для меня это была высокая точка, но, выиграв „Grammy“ за альбом „Off the Wall“, я не был счастлив, потому что я хотел бы сделать гораздо больше. Я не был удовлетворен, как его приняли, хотя это был огромный успех, это был самый продаваемый альбом сольного артиста в то время — более 10 миллионов копий, это был успех для черного артиста». И полученная за альбом первая, но единственная (!) «Grammy» означала для него не победу, а… поражение. Амбициозному юноше такого признания было явно недостаточно. «Вся моя семья думала, что я сойду с ума, — вспоминал позже Джексон, — настолько сильно я себя этим изводил. Но в какой-то момент я сказал себе: „Подожди следующего альбома — ты им еще все докажешь“».