Главное о кейсе
По одному чрезвычайному происшествию поступают разные звонки: сведения дополняются, повторяются и меняются по мере развития ситуации. Мы создали рабочий инструмент – ИИ-помощника, который объединяет записи в сводку по событию. Распознавание переводит аудио в текст, языковая модель выделяет существенные сведения, а чат позволяет уточнять детали. Сотрудник получает картину случившегося, известных действий и статуса по доступным записям. Реализованы русский и английский языки.
Механизм работы: работающая цепочка аудиозаписи → сводка → вопросы по событию
Как проект изменил жизнь пользователей
Пользовательский сценарий – включиться в работу с происшествием, о котором сотрудник ещё ничего не знает. При ручном подходе сведения приходится восстанавливать из нескольких записей. В программе можно начать со сводки и задать уточняющий вопрос в контексте выбранного события.
Для оператора или диспетчера теперь это способ сосредоточиться на существенных обстоятельствах, затратив 3-5 минут на прочтение сводки; для подключившегося руководителя – ознакомиться с известными действиями и состоянием ситуации. Работа с событием объединяет материалы и вопросы в одном контексте.
В целом это даёт: сокращение времени на ознакомление, снижение объёма повторного прослушивания и уменьшение числа пропущенных фактов. Скорость реагирования растёт, а значит, ущерб от запоздалой реакции минимизируется
Было: 15–20 звонков по одному событию, картина – только в голове дежурного, передача смены – устный пересказ на полчаса.
Стало: сводка за 3-5 минуты, хронология и открытые вопросы – в одном месте, новичок входит в контекст сам.
Бизнес-задача и ее решение
Продуктовая задача – сократить ручное сопоставление разрозненных сообщений о происшествии и помочь сотруднику быстрее получить общую картину. Одно событие может развиваться часами, а сведения о нём поступать в нескольких звонках и уточняться со временем.
Решение строится вокруг события: прикреплённые записи проходят распознавание, их содержание используется для сводки и ответов на вопросы.
Чего удалось достичь:
Сводка по событию формируется без ручной обработки записей сотрудником.
Время ознакомления подключившегося сотрудника с событием сокращается кратно – от десятков минут прослушивания до минут чтения.
Противоречия между сообщениями выявляются и видны в сводке, а не теряются в потоке.
Контекст события передаётся между сотрудниками и сменами без устного пересказа.
Крафт (мастерство), реализация, технические детали
Ключевое инженерное решение – событие как единица анализа. Вместо обработки каждой записи по отдельности мы строим конвейер вокруг происшествия: несколько аудиозаписей агрегируются в один контекст, и языковая модель работает не с транскриптами, а с их совокупностью: сопоставляет показания, выделяет устойчивые факты и выявляет противоречия между звонками.
Сквозной процесс (аудио → сводка → вопросы) работает как единый цикл. Ответ на вопрос сотрудника опирается на тот же извлечённый контекст, что и сводка, – поэтому уточнение не требует повторного прослушивания исходных записей.
Требования к эксплуатации изначально заложены в архитектуре системы. Обновление сводки при поступлении новых записей, экспорт отчёта и возможность полностью локального размещения моделей (записи о происшествиях – чувствительные данные, облачные API для этого сценария заведомо неприемлемы) заложены в требования с первой версии.
Прототип интерфейса проверяет главный сценарий: карточка события с параметрами, статусом и числом записей, сводка, переход к исходным файлам и вопрос по событию в чате. Список с фильтрами и сортировкой закрывает рабочую рутину диспетчера – поиск нужного происшествия среди всего потока событий.
Инсайты, гипотезы, процесс создания и взаимодействия с заказчиком
Инсайт, на котором построено решение: один звонок отражает только часть происшествия – общая картина складывается только тогда, когда сведения из нескольких обращений рассматриваются вместе и в контексте развивающегося события. Именно поэтому в основе продукта лежит не обработка записей по отдельности, а событие как единица анализа.
Подтверждённая гипотеза: сотрудник быстрее понимает существенные обстоятельства и упускает меньше важных деталей, когда начинает не с прослушивания записей, а со сводки, и уточняет детали в чате по событию. Рабочий прототип реализует эту цепочку полностью: распознавание речи, построение сводки и ответы на вопросы по событию на русском и английском языках. Механика проверена на тестовых данных, соответствующих реальным сценариям работы с происшествиями.
Скриншоты