Новосибирский «Писец» словил галлюцинации и написал Тотальный диктант на тройку

В Новосибирске стали известны результаты, полученные искусственным интеллектом «Писец» на ежегодной акции «Тотальный диктант». Об этом сообщила пресс-служба НГУ. Открытая система вполне удовлетворительно расставила запятые и разбила текст на абзацы, однако галлюцинаций избежать не удалось.

Галлюцинация — это ответ авторегрессионной нейросетевой модели языка, который корректен грамматически, но неверен семантически (не соответствует входному запросу по смыслу).

«"Писцу" вполне можно было бы поставить твердую тройку, если бы не несколько обстоятельств. Из 276 слов диктанта он пропустил шесть, пять из которых стояли в конце предложения, причем в этих случаях он не ставил точку, но следующее предложение начинал с заглавной буквы. Еще семь слов им было услышано неверно. Например, вместо "наивысшего" искусственный интеллект написал "наявившего". Другой пример словотворчества — "кальиончатых" вместо "клеенчатых". Встретилось и неверно услышанное выражение "Читай — не хочу". Вместо него написано "Считай, не хотите", свидетельствующее и о проблемах с грамматикой», – разобрала ошибки «Писца» старший преподаватель кафедры источниковедения литературы и древних языков Гуманитарного Института НГУ Людмила Буднева.

Отметим, создатель программы Иван Бондаренко сомневался, что его «детище» сможет получить положительную оценку.

«Результаты работы «Писца» оказались выше, чем прогнозировалось. Изначально он разрабатывался год назад для автоматического стенографирования звукозаписей интервью или защит диссертаций. Соответственно, даже 20-30 % ошибок в расшифрованных текстах — это уже тот уровень, который позволяет человеку гораздо быстрее подготовить чистовой текст стенограммы, чем если бы он писал его «с нуля», прослушивая запись полностью самостоятельно», – отметил Иван Бондаренко.

Организаторы «Тотального диктанта» в Новосибирске сообщили, что всего в столице Сибири работало 75 площадок, самыми крупными из них традиционно стали Новосибирский государственный университет, Новосибирский государственный технический университет и Новосибирский государственный педагогический университет. Организаторы получили три с половиной тысячи работ, это чуть меньше, чем в прошлом году.

В 2024 году открылась первая площадка в ТЦ «Мега», а также в этом году к акции присоединились энергетики, около 30 человек написали диктант на новосибирской ТЭЦ-4 и посетили экскурсию по электростанции.

Самым орфографически сложным для участников «Тотального диктанта» стало слово «вырастишь».