Казахоязычные пользователи госуслуг сталкиваются с низким качеством информации от ИИ ассистентов исследование Аналитический интернет журнал Власть

Казахоязычные граждане систематически получают от ИИ-ассистентов в госуслугах Казахстана неполную, недостаточно точную и на практике мало применимую информацию. К такому выводу приходит независимая исследовательница Жаннат Бубекбаева в своей статье, посвященной использованию искусственного интеллекта в системе электронного правительства Казахстана. Статья опубликована на сайте аналитического центра CAPS Unlock.

В работе автора анализируется, насколько одинаково эффективно AI-ассистент eGov функционирует на казахском и русском языках.

«Результаты показывают явное неравенство. Казахоязычный бот часто упускает практическую информацию, а его тексты больше похожи на машинный перевод, чем на речь носителя языка», - отметила исследовательница.

При этом, по ее словам, русскоязычный бот в среднем работает лучше, но тоже ненадежен и допускает серьезные ошибки, например ссылается на документы и ведомства Российской Федерации.

Для этого исследования Бубекбаева в марте направляла в ИИ-ассистент eGov Mobile по семь пар запросов на казахском и русском языках, охватывающих повседневные государственные услуги. По итогам проверки выявленные проблемы были разделены на три категории: фактические ошибки, информационные пробелы и качество языка.

Наиболее показательный результат был связан с месячным расчетным показателем (МРП). С 1 января этого года он установлен в размере 4 325 тенге. Но в одном из выявленных в ходе исследования случаев ИИ-ассистент на казахском указал значение, примерно в 17 раз превышающее реальное.

«Это не просто технические неудобства. Когда государственный ИИ-ассистент сообщает гражданину неверную информацию о штрафе, не указывает стоимость регистрации имущества или направляет пенсионера к несуществующему в стране документу, последствия сразу проявляются на практике», - отмечает автор.

По всем запросам наблюдалась единая закономерность. В случаях, когда русскоязычный бот указывал конкретную стоимость или сроки оформления, например информацию о регистрации имущества, казахоязычный бот либо пропускал эти данные, либо предоставлял размытые ответы.

«Обе языковые версии не выглядят как переводы друг друга. Они опираются на разный исходный контент с добавлением или исключением отдельных деталей. Это указывает на то, что казахоязычная версия либо формировалась на основе других исходных материалов, либо проходила менее строгий контроль качества», - отмечено в исследовании.

Еще одной проблемой автор отмечает, что, хотя все ответы на казахском языке остаются понятными, им не хватает естественности.

«Проблема не в несовершенстве ИИ. Проблема в неравномерности сбоев. <…> Кроме того, это свидетельствует о серьезном изъяне в системе государственных закупок. Зафиксированное неравенство указывает на то, что при проектировании, заказе или приемке системы языковое равенство не рассматривалось как обязательное требование», - указывается в статье.

Для устранения этих проблем исследовательница предлагает установить минимальные стандарты языкового равенства для всех ИИ-систем в государственных услугах, включить языковое равенство в качестве конкретного критерия оценки в процессы их закупки, а также провести системный двуязычный аудит действующего ИИ-ассистента eGov с последующей публикацией его результатов.

«Эта ситуация прямо противоречит высоким показателям страны в сфере эффективного использования цифровых технологий в оказании государственных услуг. Казахстан занимает 24-е место в мире в индексе развития электронного правительства ООН», - отметила Бубекбаева.

По ее данным, в действующем приложении eGov Mobile, запущенном в октябре 2019 года, зарегистрировано более 11,7 млн пользователей, а ежемесячная аудитория составляет около 6,4 млн человек.

Платформа использует ИИ-ассистентов, чтобы помогать гражданам получать государственные услуги – от оформления удостоверения личности до регистрации бизнеса и подачи заявок на социальные выплаты.

Власть — это независимое медиа в Казахстане.
Поддержите журналистику, которой доверяют.

Поддержать Власть