То, что компьютеры давно прошли тест Тьюринга и могут создавать вполне годные тексты, которые целая редакция научного журнала не в состоянии идентифицировать как машинный бред, не новость. А вот компьютер, который вполне в состоянии прочитать и адекватно оценить текст, написанный человеком, это что-то новое. Прогресс стучится в двери школьных классов: проверять сочинения теперь может программа. Правда, пока только сочинения на английском языке.
Масштабное исследование группы из Университета Экрона (Огайо) показывает: компьютер не хуже учителя способен разобраться в школьных сочинениях. Для эксперимента были отобраны больше 22 000 работ из разных школ, написанных от руки учениками в возрасте от 12 до 16 лет. Работы были распознаны компьютером с помощью сканера (точность транскрипции составила около 98%), и им были выставлены оценки за грамотность и содержание. Слепая проверка тех же работ экспертами из числа учителей показала, что баллы, выставленные компьютером, были абсолютно адекватны.
Система электронной проверки сочинений уже не первый раз проходит апробацию, но первые опыты были не столь удачны и уже подвергались критике. Профессор Лес Перельман из MIT, в частности, удачно обманывал пробную версию программы американского Минобра e-Rater, которая автоматически проверяет выпускной тест по математике и эссе на английском языке. Он делал то, что как раз неплохо делает генератор текста SCIgen: нарочно писал бред, замаскированный под связное сочинение. И получал неплохие оценки.
