В разгар кризиса, вызванного гербовым сбором, Гренвиль утратил свой пост. Король был раздражен, ему не нравилась привычка Гренвиля читать ему лекции об экономической политике, и он разгневался, когда в 1765 году партия Гренвиля по политическим причинам исключила имя его матери из Акта о регентстве, который составили в связи с болезнью короля.[11] Георг III отправил Гренвиля в отставку прежде, чем нашел ему достойную замену. В растерянности король обратился к дяде, герцогу Камберленду, который, в отличие от Ганноверов, был способным и весьма уважаемым человеком. Герцог предложил назначить на пост первого министра Питта, однако тот по каким-то сложным причинам категорически отказался от министерского поста. Возможно, Питт не был уверен в том, что справится с конфликтом, к тому же он не был склонен к компромиссам, да и весь предыдущий год Питт был не при делах: физические, а иногда и душевные недуги время от времени мешали его активности.
Историки полагают, что если бы в 1765 году Питт занял предложенный пост, все последующее десятилетие прошло бы по-другому, но такое предположение зависело от возможности Питта действовать, а он, как доказали последующие события, этого не мог. Бескомпромиссность Питта и завышенные требования ослабили правительство во время конфликта с Америкой. Обладавший невероятной популярностью, репутацией, влиянием, а также несравненной властью над палатой общин, Питт был эпической фигурой; он принес империи победу — но не факт, что он мог ее спасти.
Питт был младшим сыном в семье, которую лорд Честерфилд назвал «очень новой», это закалило его характер и воспитало способности. Его дед, прозванный Алмазным Питтом, характер имел жесткий и тиранический, а семейный капитал нажил на торговле с Индией, он также состоял на службе в Ост-Индской компании и был губернатором Мадраса. Алмаз, о котором зашла речь, был куплен французской короной более чем за два миллиона ливров. В Уилтшире семья приобрела Олд-Сарум; это было так называемое «гнилое местечко» — городок, пришедший в упадок, но сохранивший право представительства в парламенте. Сначала от округа избирался старший брат Уильяма Питта, но он растратил свое состояние, восстановил против себя всех друзей и в «очень плохих обстоятельствах» покинул Англию; время от времени на него находили приступы безумия, и, «хотя в лечебнице он не находился, вел уединенную жизнь». Признаки безумия, по-видимому наследственного, проявлялись и у сестер Питта, одну из них даже пришлось держать под замком, но две другие более или менее справлялись со своим недугом. Уильям Питт стал избираться от округа Олд-Сарум, когда ему исполнилось 27 лет. Всю жизнь Питт страдал от подагры, которая мучила его со времен обучения в частной школе в Итоне. Подагра редко поражает людей в юности, и то, что она проявилась у него в таком возрасте, свидетельствует о тяжести заболевания. Периодически повторяющиеся припадки делали его раздражительным — обычное явление для подагриков. Для облегчения страданий Питту изготовили специальные стул и экипаж.