Людей Конфуций делил на пять разрядов, смотря по их нравственным и умственным качествам. К первому, низшему, разряду он причислял всего чаще встречающихся людей, не отличающихся никакими особыми качествами, — людей, которые говорят только для того, чтобы говорить, не думая о том, говорят ли они дело или пустяки, людей привычки, живущих жизнью чисто животной изо дня в день, не умеющих ничего сделать без указания. Понятия этого разряда людей, по мнению Конфуция, далее глаз, ушей и рта не простираются. Ко второму разряду он причисляет грамотных, образованных людей, настолько развитых, что они способны иметь понятия о вещах, недоступных понятиям простого народа. Эти люди живут сознательною жизнью, соображаясь с законами и обычаями. К третьему разряду принадлежат люди здравого смысла, которые ни в чем не отступают от него. Они одинаковы в горе и в радости, невозмутимы, добродетельны, умеют говорить и молчать. Этих людей Конфуций называл философами. Четвертый разряд составляют люди прямодушные и истинно добродетельные, и, наконец, самый малочисленный, пятый разряд— люди совершенные во всех отношениях. Только такие люди и могут стоять во главе государства, говорит Конфуций.
В подобного рода беседах и поучениях проводил Конфуций свое время. Число его учеников за это время достигало трех тысяч человек, не считая случайных слушателей. Собрания людей, стекавшихся послушать мудрого философа, с каждым днем увеличивались. Но и из княжества Сун философ принужден был удалиться. Военачальник князя Сун, недовольный этими сборищами, счел Конфуция нарушителем общественного спокойствия и велел разогнать его учеников и слушателей, а дерево срубить.
Конфуций вновь пустился в странствования и скоро попал в княжество Цао, но прожил там без всякой пользы. В соседнем княжестве Чэнь ему удалось спасти жизнь трех приговоренных к смертной казни преступников. Князь Чэнь отнесся к философу весьма благосклонно, но его министры из зависти и боязни опасного соперника заключили Конфуция вместе с учениками в темницу. В ней философ сидел в продолжение недели, затем был освобожден войсками соседнего княжества.
Конфуций мужественно перенес все эти невзгоды и даже находил силу духа утешать учеников. Освобожденный из плена, Конфуций вместе с учениками посетил священную гору Тай-Шан — место жертвоприношений древних царей, во времена Конфуция почти забытое и запущенное. Вид этого запущенного места поверг Конфуция в глубокое и грустное раздумье. В это время в душе его опять возникло сомнение в себе самом и боязнь за будущность учения, а также сильное разочарование в людях. Под влиянием таких мрачных мыслей Конфуций сказал ученикам: