Голосовой бот с ИИ: «Сбер» представил патент на прослушивание вызовов для защиты от мошенников

Голосовой бот с ИИ: «Сбер» представил патент на прослушивание вызовов для защиты от мошенников

Команда специалистов Сбера рассказала о своем новом продукте. Речь о голосовом помощнике с технологией искусственного интеллекта. В нем заложена функция анализа аудио и видеовызовов, которые приходят на телефон клиента через мессенджеры. Сделано это за тем, чтобы эффективно отслеживать и пресекать деятельность мошенников.

Рассматриваемый метод подробно расписан в патенте, и состоит из следующих этапов:

• Перехват аудиовызова через гаджет клиента;
• Формирование искусственного голосового потока, который инициирует диалог с мошенником;
• Конвертация входящего аудиосообщения в векторный формат;
• Процедура конвертируемого аудио потока с использованием программы машинного обучения первого типа. Производится сравнение с уже имеющимися данными, в которых содержится мошенническая деятельность;
• Процедура транскрибирования аудио сообщения и его аналитика с применением машинного обучения уже второго типа. На этом этапе происходит анализ входящего диалога с учетом семантики, а также разговорных клише, таких как набор слов, структурное построение фраз, их последовательность и расстановка с учетом пауз в диалоге;
• Процесс классификации аудио потока с учетом данных по первому и второму типу исследований машинного обучения. Отображение статуса входящего звонка в виде сообщения на дисплее гаджета клиента.

Разработчики уверяют, что запатентованная технология будет направлена на борьбу с мошенниками для эффективного снижения их активности. Это возможно путем одновременного анализа диалога по множеству параметров и критериев.

Подводя итог, стоит отметить, что в инновационной технологии боты голосовые помощники будут использоваться двумя способами. С одной стороны, искусственный интеллект сам начнет диалог с мошенником через телефон и определит собеседника, как нежелательного. Далее пользователь будет уведомлен об этом и информационная атака будет пресечена. Также голосовой помощник будет анализировать аудио вызовы для определения голосовых клише с использованием ключевых слов. В данном случае искусственный интеллект вмешается в разговор и мошенническая атака будет пресечена.

Именно эти два способа, работая совместно, помогут сократить факты мошенничества по телефону, и свести эти информационные атаки к минимуму. Новая технология будет актуальна, в том числе и для защиты отдельных групп населения, особенно людей в возрасте, которые не могут сразу распознать, кто им звонит.

Общий план анализа аудиопотока входящего вызова.

Схема анализа аудиопотока на выявление синтетических изменений.

Схема создания синтетического исходящего аудиопотока для проведения диалога.

Общий план устройства вычислений.