В этой статье мы обсудим, как ожидания бизнеса расходятся с реальными возможностями ИИ, стоит ли сравнивать российские решения с мировыми аналогами и почему автоматизация при неправильном понимании природы нейросетей может принести обратный эффект.

Из крайности в крайность

Разработки в сфере искусственного интеллекта ведутся в том числе и в России, и вполне естественно возникает вопрос их сопоставления с мировыми аналогами. Однако это сравнение представляется преждевременным. Создание конкурентоспособных нейросетей требует наличия мощной компонентной базы и колоссальных вычислительных ресурсов, а одной из основных преград на пути к технологическому паритету выступает дефицит аппаратного обеспечения.

Кроме того, для обучения моделей необходимы качественные датасеты. Сложность здесь заключается не только в физическом объеме информации, но и в легальности и технической чистоте ее получения. Массовый сбор данных из открытых источников сопряжен с серьезными юридическими и инженерными трудностями, даже если контент не защищен авторским правом. Прямое взаимодействие с держателями баз данных — гораздо более эффективный и устойчивый путь, чем попытки разрозненного извлечения сведений из сети.

Как пример возьмем патентную сферу. Для качественного обучения системы недостаточно стандартных реестров национальных ведомств. Глубокий анализ требует обработки сопутствующей переписки с зарубежными регистраторами, материалов экспертиз и иных специфических документов. Несмотря на то что формально такие сведения могут считаться публичными, их технический сбор и систематизация остаются крайне трудоемкой задачей. В таких реалиях зачастую рациональнее использовать уже готовые зарубежные решения, чем пытаться наполнить отечественную модель эквивалентным объемом структурированных данных.

Развитие российского ИИ-сектора во многом подстегивается в связи с высоким спросом со стороны бизнеса, который порой испытывает завышенные ожидания и не всегда осознает лимиты технологий. Они связны с тем, что генеративные модели по своей сути не выдают гарантированно верную истину. Их работа — это формирование наиболее правдоподобного ответа, максимально похожего на результат человеческого труда. Однако ИИ нередко воспринимают как некую интеллектуальную сущность, обладающую мышлением, что, безусловно, не соответствует действительности.

И хотя выше было сказано, что сопоставлять российские и зарубежные решения преждевременно, впадать в другую крайность тоже будет ошибкой. Утверждение о том, что российский сегмент искусственного интеллекта находится в роли догоняющего, является не вполне корректным. В действительности мировое сообщество исследователей находится на этапе поиска наиболее продуктивных ниш для использования этой сложной и во многом нелинейной технологии.

Ради быстрого эффекта

На нынешнем уровне развития моделей их практическое применение сосредоточено в зонах быстрого эффекта: подготовке текстового контента, оптимизации документооборота, аналитической поддержке и автоматизации взаимодействия с клиентами. Преимущество искусственного интеллекта проявляется там, где необходимо оперировать естественным языком, учитывать сложный контекст и работать с высокой вариативностью неструктурированных данных.

При этом ИИ не может служить универсальной заменой классическим ИТ-системам. В процессах, поддающихся жесткой регламентации и описанию через строгие алгоритмы, традиционные решения остаются более надежными, экономичными и проверяемыми. Точно так же он не способен выступать полноценной альтернативой человеческому интеллекту при выполнении многоуровневых задач. Наибольшие риски сопряжены с делегированием нейросетям вопросов стратегического управления и принятия критических тактических решений. Природа алгоритмов заставляет их выдавать наиболее усредненный результат, в то время как прорывные (равно как и критически ошибочные) бизнес-стратегии обычно лежат за пределами статистической нормы, в области нестандартных решений.

Кроме того, преждевременная интеграция ИИ непосредственно в критические операционные циклы компании несет в себе скрытые угрозы. Использование автоматизированных моделей без участия квалифицированного специалиста и системы многоуровневого мониторинга способно дестабилизировать бизнес-процессы. Учитывая, что этап повсеместного и бесперебойного внедрения ИИ еще не пройден, объективно оценить долгосрочную безопасность такой глубокой автоматизации на данный момент крайне сложно.

Зеркало слепых зон

Поскольку модель обучается на массивах данных, отражающих реальный рыночный опыт, она неизбежно впитывает не только накопленную экспертизу, но и транслирует коллективные заблуждения конкретной индустрии. В итоге ИИ становится зеркалом существующих в отрасли слепых зон. Системные недоработки, использование архаичных методик и укоренившиеся профессиональные деформации оказывают фундаментальное влияние на релевантность выводов искусственного интеллекта. Они не разрушают вычислительную логику нейросети как таковую, но радикально искажают информационную среду.

Как следствие, если внутри корпоративной культуры или целого профессионального сообщества определенные установки принимаются на веру без должной верификации, алгоритм начинает интерпретировать их как непреложную норму. Это создает ряд специфических рисков в зависимости от сферы применения.

К примеру, в банковском секторе нейросеть может необоснованно завышать уровень риска при оценке заемщика, если исторически принятые в организации решения отличались избыточным консерватизмом. Модель просто копирует осторожность кредитных офицеров прошлого, блокируя развитие новых клиентских сегментов.

В медицине алгоритмы рискуют тиражировать популярные, но не всегда наиболее эффективные диагностические шаблоны. Если в обучающей выборке преобладали стандартные протоколы без учета современных клинических исследований, ИИ будет предлагать инерционный путь лечения.

В юридической практике искусственный интеллект склонен воспроизводить громоздкие и архаичные формулировки договоров. Он опирается на десятилетний опыт работы юридического департамента, игнорируя тот факт, что правовая среда и стандарты делового оборота уже давно изменились.

В сфере кибербезопасности системы мониторинга могут ложно идентифицировать угрозу там, где имеет место лишь нестандартное, но легитимное поведение пользователя. Это происходит, если норма в обучающей базе была описана слишком узко.

В промышленном производстве ИИ способен легитимизировать обходные пути. Если в логах эксплуатации зафиксировано, что регламенты годами нарушались ради выполнения плана, модель сочтет такие действия оптимальным стандартом, поскольку так делали всегда.

Однако наибольшую опасность представляют так называемые галлюцинации уверенности. Благодаря совершенству лингвистических структур ИИ мастерски использует профессиональную терминологию, ссылается на реальные корпоративные процедуры и безупречно выдерживает официально-деловой стиль. В результате возникает опасный психологический эффект: текст, который выглядит и звучит как профессиональный отчет, воспринимается человеком как априори достоверный. Подобное внешнее правдоподобие притупляет критическое восприятие, многократно повышая риск принятия ошибочных решений на основе технически совершенной, но фактически неверной рекомендации.

Ловушка автоматизированной инерции

В свете вышесказанного становится понятным, почему интеграция искусственного интеллекта, вопреки распространенному заблуждению, не обязательно приводит к модернизации бизнеса. На практике ИИ — это мощный катализатор, и если его внедрить без предварительного пересмотра данных и регламентов, он лишь многократно ускоряет накопленную системную инерцию. Вместо качественного скачка компания получает высокоскоростное воспроизводство старых ошибок.

Ярким примером служит автоматизация документооборота. Если нейросеть получает доступ к архиву, не прошедшему предварительную селекцию и очистку, она начинает генерировать устаревшие формы контрактов и отчетов с беспрецедентной скоростью. Аналогично в клиентском сервисе: ИИ, обученный на архаичных скриптах, будет безупречно транслировать неэффективные модели коммуникации, которые давно раздражают потребителя. В обоих случаях показатели производительности (количество созданных документов или обработанных заявок) формально растут, однако ценность и качество принимаемых решений остаются на прежнем, а иногда и более низком уровне.

Особую опасность этот эффект представляет в отраслях с высокой ценой ошибки. В таких сферах, как медицина, юриспруденция, финансы, кибербезопасность, государственное управление, промышленная безопасность, HR, патентное дело и научно-исследовательские разработки (R&D), автоматизированная ошибка может привести к катастрофическим правовым, экономическим или социальным последствиям.

Как следствие, для перехода к зрелому использованию ИИ недостаточно просто выбрать современную языковую модель. Требуется внедрение жесткой инженерной и экспертной дисциплины, включающей следующие этапы:

· Глубокий аудит данных на предмет исторических перекосов.

· Четкое разделение объективных фактов, субъективных экспертных суждений и специфических корпоративных привычек, которые часто ошибочно принимаются за стандарты.

· Актуализация интеллектуальных активов: радикальное обновление корпоративных баз знаний перед их подачей на вход модели, удаление противоречащих друг другу или устаревших инструкций.

· Стресс-тестирование на пограничных сценариях и проверка поведения алгоритма в нестандартных, спорных и редких ситуациях, где вероятность ошибки максимально велика.

· Использование независимых отраслевых стандартов, научной литературы и международного опыта для верификации ответов.

· Внедрение механизмов, заставляющих ИИ аргументировать свой ответ и указывать степень уверенности в нем, что позволяет оператору оценить надежность рекомендации.

· Обязательное участие квалифицированного специалиста в утверждении решений, цена ошибки в которых превышает допустимый порог риска.

Фундаментальное правило безопасной интеграции гласит: качество работы искусственного интеллекта невозможно объективно проверить, используя исключительно те же массивы данных, тех же людей и те же процедуры, которые изначально сформировали среду с искажениями. Истинная модернизация начинается там, где появляется внешний независимый фильтр и критическое осмысление накопленного опыта.

Александр Киселев, патентный поверенный UserGate