Однако самые зловещие слухи ходили о Джозефе Карвене возле доков, расположенных вдоль южной части Таун-Стрит. Моряки - суеверный народ, и просоленные морские волки, из которых состояли команды шлюпов, перевозивших ром, рабов и патоку, каперов и больших бригов, принадлежащих Браунам, Кроуфордам и Тиллингестам, осеняли себя крестным знамением и складывали пальцы крестом, когда видели, как худощавый, обманчиво молодой, желтоволосый Джозеф Карвен, слегка сгорбившись, заходил в принадлежавший ему склад на Дублон-Стрит или разговаривал с капитанами и суперкарго у длинного причала, где беспокойно покачивались его корабли. Даже служащие и капитаны, работающие у Карвена, боялись и ненавидели его, а все члены его команды были сбродом смешанных кровей с Мартиники, из Гаваны или Порт-Ройала. По правде говоря, именно то обстоятельство, что команда Карвена так часто менялась, было основной причиной суеверного страха, который моряки испытывали перед таинственным стариком. Команда, получив разрешение сойти на берег, рассеивалась по городу, некоторых моряков посылали по всей вероятности с разными поручениями. Но когда люди вновь собирались на палубе, можно было побиться об заклад, что одного-двух обязательно недосчитаются. Эти поручения большей частью касались фермы на Потуксет Роуд; ни одного из моряков, отправленных туда, больше не видели, все это знали, и со временем Карвену стало очень трудно подбирать свою разношерстную команду. Почти всегда, послушав разговоры, ходящие в гавани Провиденса, несколько человек сразу же дезертировали, и заменять их новыми членами команды, завербованными в Вест-Индии, стало для Карвена очень трудно.
К 1760 году Джозеф Карвен фактически стал изгоем; с ним никто не хотел знаться, ибо его подозревали в связи с дьяволом и во всевозможных ужасах, которые казались тем более угрожающими, что ни один из горожан не мог сказать внятно, в чем они заключаются, или даже привести хоть одно доказательство того, что эти ужасы действительно происходят. Может быть, последней каплей стало дело о пропавших в 1758 году солдатах: в марте и апреле этого года два королевских полка, направляющиеся в Новую Францию были расквартированы в городе и непонятным образом поредели в гораздо большей степени, чем бывает обычно в результате дезертирства. Ходили слухи, что Карвена часто видели беседующим с этими облаченными в красные мундиры парнями; и так как многие из них бесследно исчезли, снова вспомнили о странных исчезновениях моряков. Трудно сказать, что случилось бы, останься полки в городе на более длительный срок.