Ученые из компании Kaggle при содействии и спонсорстве благотворительного фонда компании Hewlett Foundation разработали программное обеспечение для оценки написанных от руки школьных сочинений. Они хотели определить, кто ставит более справедливые и адекватные оценки: люди или компьютеры. Hewlett изучает, какие компетенции и умения будут в будущем необходимы учащимся, чтобы получить образование и в целом преуспеть в жизни. Они пришли к выводу, что в XXI веке ученикам будет нужно мыслить критически и эффективно общаться. Для развития этих способностей в школе необходимо перейти от тестовых заданий к сочинениям, для написания которых понадобится мыслить нестандартно и доступно выражать все, что думаешь. Проверка и выставление оценок написанных от руки сочинений – дело очень трудоемкое. И именно поэтому Hewlett попросили специалистов из Kaggle разработать ПО, дающее возможность компьютерам это делать.
Их совместный проект дал определенные результаты>[5]. Было разработано обеспечение, при помощи которого оценили 22 000 написанных от руки сочинений. Оно анализировало структуру предложений, грамматические и пунктуационные ошибки и, в принципе, показало, что по сравнению с учителями в состоянии адекватно оценивать, если сочинение стандартное по всем критериям. Но, как говорит Голдблум, у программы обнаружились серьезные недостатки в оценке сочинений выше среднего уровня. Компьютер не смог правильно проанализировать выдающиеся, неожиданные и нестандартные сочинения, в результате чего они получили отрицательную оценку, то есть совершенно не ту, которую заслуживали.
Машины работают и учатся на огромном количестве информации, а люди используют свое воображение и предлагают новые и нестандартные идеи.
«Для решения проблемы мозг человека в состоянии соединить различные и разноплановые логические и сюжетные линии, – говорит Голдблум>[6], – и в этом вопросе мы наблюдаем ограничения работы машин. Если компьютер в состоянии увидеть что-то среднее, он может это среднее повторить в своей работе, но среднее в наши дни уже никого не устраивает».
Еще один любопытный эксперимент провела в Японии ученая Норико Араи. Она создала искусственный интеллект, который получил более высокие оценки по сравнению с 80 % учащихся при прохождении сложного экзамена для поступления в колледж. Ее так называемый Todai Robot сдал экзамен по математике и точным наукам с результатом, которого добились лишь 1 % учащихся, а также смог написать сочинение из 600 слов лучше, чем большинство абитуриентов. Араи уверена, что люди преуспеют в эпоху развитого искусственного интеллекта, если будут понимать, какие именно умения им необходимо освоить. Она пришла к выводу, что искусственный интеллект способен выполнять задания лучше, чем 80 % людей, потому, что быстрее «вспоминает» точную информацию и безошибочно «помнит» факты и сведения, которые учащиеся должны заучивать в ходе подготовки. Однако Todai не смог получить оценки выше полученных 20 % абитуриентов, которые подходили к решению задачи творчески и выходили за рамки ответа на вопрос