Населения Каролинских островов ни в какие времена не хватило бы для строительства «тихоокеанской Венеции». По словам Бэллинджера, «дело в том, что на самом острове Понапе и в его окрестностях никогда не было значительных ресурсов рабочей силы. Этот фактор необходимо принимать во внимание при попытке решить загадку строительства Нан Мадола». Гористый островок Понпей большей частью необитаем, и не может прокормить более 30 000 человек. Проект такого масштаба, как Нан Мадол, потребовал бы гораздо большего количества рабочих рук. Джон Макмиллан Браун, ведущий исследователь Новой Зеландии начала XX века, заметил: «Для плавания через риф во время прилива и транспортировки огромных блоков весом от 5 до 20 тонн с последующей доставкой на высоту 60 футов понадобились бы десятки тысяч работников, занятых организованным трудом. Всех их нужно было где-то селить, одевать, кормить. Между тем в радиусе 1500 миль от острова сейчас можно насчитать в общей сложности не более 50 000 человек». Даже при таком количестве строителей на сооружение городского комплекса из четырех-пяти миллионов базальтовых блоков понадобилось бы не менее 20 лет.
Понпеяне сейчас почти не проявляют интереса к археологическому памятнику, вызывающему благоговение у иностранцев. «У местных жителей, — писал журнал Science, — нет легенд, связанных с каменоломнями, строителями, временем строительства и причиной его прекращения». Они избегают этого места, считая его недобрым, опасным; существует поверье о людях, пропавших там после наступления темноты или убитых сверхъестественными силами. Фактически, на посещение Нан Мадола наложено табу еще с конца XIX века. Спустя 100 лет некоторые местные проводники соглашаются водить туда чужестранцев, но только в дневное время. «Современные жители Понапе и их ближайшие предки, — отмечал Бэллинджер, — не проявляли никакого интереса к каменному строительству и не владели даже простейшими трудовыми навыками. Между тем сооружение города требовало значительного инженерного мастерства».
«Мне пришлось использовать всю свою силу убеждения даже для того, чтобы найти двух подростков, которые бы ежедневно перевозили меня на Нан Мадол», — сетовал знаменитый Эрих фон Дэникен, автор теории о древних астронавтах, посетивший Понпей в начале 1970-х годов. В докладе министерства внутренних дел США, где упоминается о громадном объеме работ и сложной организации труда, связанной с добычей, транспортировкой и укладкой 250 миллионов тонн базальта, утверждается, что «неписаная история Понапе свидетельствует о том, что Нан Мадол был сооружен при участии или под управлением людей, не принадлежавших к его островной культуре». Фон Дэникен писал о нынешних туземцах как о «бедных, неизлечимо ленивых, не проявляющих никакого интереса к деловым предложениям». Этнолог Уильям Черчилль, побывавший на Понпее в начале XX века, пришел к выводу, что строительство доисторического города было «совершенно непосильной задачей для теперешних островитян». В его словах звучат отголоски размышлений корабельного хирурга с «Лэмбтона», британского тендера, морского парусного судна, стоявшего на якоре у побережья острова в 1836 году. Доктор Кэмпбелл считал, что Нан Мадол был «плодом труда людей, далеко превосходивших сегодняшнее поколение, чья история погрузилась в многовековую пучину забвения и чье мастерство теперь можно видеть лишь в разбросанных остатках воздвигнутых ими сооружений, поглощенных тропической зеленью над прахом их былой славы, потомкам осталась только сомнительная радость догадок и предположений».