Кейс: встроенный сервис ИИ‑протоколов и расшифровки встреч в системе управления проектами

Сервис видеосвязи ограничил функцию расшифровки созвонов. За 5 часов мы сделали собственную расшифровку и встроили её в систему управления проектами нашего агентства Inbox Marketing. Протокол и задачи по каждой встрече снова появляются в проекте вскоре после звонка.

Клиент

Заказчик этого проекта — мы сами: маркетинговое агентство Inbox Marketing. Команда каждый день созванивается с клиентами и внутри агентства, и все созвоны записываются. По расшифровке нейросеть готовит протокол встречи с резюме и списком задач, а после встреч с клиентами ещё и черновик предложения.

Задача

После каждой встречи кто-то должен зафиксировать, о чём договорились: составить протокол, разнести задачи по проектам, подготовить клиенту черновик предложения. Вручную на это уходят часы, а договорённости, которые никто не записал, со временем теряются.

У нас эту работу делала нейросеть: после звонка сервис видеосвязи присылал текст разговора, и по нему она готовила протокол. Затем сервис ограничил функцию расшифровки, и без текста разговора протоколы перестали появляться сразу на всех проектах агентства.

Перед нами стояла задача в тот же день вернуть расшифровку в процесс и встроить её туда, где уже хранятся записи созвонов: в нашу систему управления проектами.

Что мы сделали

  1. 01

    Решили встроить расшифровку в свою систему

    Записи созвонов хранятся в системе управления проектами, которую мы разрабатываем для себя. Расшифровку и протоколы встроили туда же, чтобы команда работала в одном месте. Подключить готовую модель распознавания речи отдельным сервисом было бы быстрее, но тогда у команды появился бы ещё один инструмент.

  2. 02

    Поручили разработку ИИ-агенту

    Задачу передали нашему ИИ-агенту для разработки, и он работал в автономном режиме. Решения по ходу оставили за собой: какой способ распознавания речи выбрать, где хранить данные и каким должен быть результат.

  3. 03

    Сравнили 5 способов распознавания речи

    ИИ-агент сравнил 5 вариантов: от встроенного распознавания речи в сервисе, где уже лежат наши видео, до собственной модели на нашем сервере. Критерии задали мы: цена, качество распознавания русской речи и место, где окажутся данные.

  4. 04

    Проверили выбранный вариант на записи

    Выбранный способ проверили на внутренней записи созвона: 9 минут видео распознались за 2 минуты. Смысл разговора сохранился, ошибки встретились в терминах и именах: «верстальщик», например, превратился в «вистальщика».

  5. 05

    Написали функцию и сотни автотестов

    ИИ-агент написал функцию расшифровки и сотни автоматических тестов к ней, сам проверил код и исправил найденные ошибки. После этого функцию выкатили, и в тот же день команда снова получила расшифровку и протоколы встреч.

Раздел «Видео» в системе управления проектами: папка «Встречи с клиентом» и запись встречи со статусом «Расшифровывается»
Раздел «Видео» в нашей системе управления проектами: запись встречи загружена, идёт расшифровка.

Как это работает

1Запись встречи в задачев чате задачи или в разделе «Видео» проекта
2Кнопка «Расшифровать»распознавание речи занимает минуты
3Текст с таймкодамирядом с видео, с поиском и выгрузкой в txt
4Протокол встречинейросеть готовит саммари, задачи и черновик предложения

Смысл разговора сохраняется, ошибки бывают в терминах и именах. Для поиска и протокола это не мешает, дословные цитаты сверяем с записью.

Результаты

5часов на разработку сервиса расшифровки
2минуты на расшифровку 9 минут видео
100+автоматических тестов проверяют функцию расшифровки
  • Расшифровка и протоколы встреч вернулись в процессы команды в тот же день, когда сервис видеосвязи ограничил функцию.
  • Команда снова расшифровывает все созвоны агентства, теперь в собственной системе: текст с таймкодами лежит рядом с записью встречи, по нему работает поиск, его можно выгрузить в txt или передать нейросети через API.
  • По каждой записи встречи нейросеть снова готовит протокол с саммари и списком задач, а после встреч с клиентами ещё и черновик предложения.
  • Рутину разработки закрыл ИИ-агент. Решения о способе распознавания, хранении данных и формате результата приняли мы, и команда получила расшифровку внутри рабочей системы вместо ещё одного внешнего инструмента.
Диагностика встреч

Что ваша компания делает с записями встреч?

5 вопросов о том, как записи, расшифровки и протоколы встреч работают на ИИ-автоматизацию процессов в вашей компании. Покажем, что уже встроено и что можно добавить.

Вопрос 1 из 5

Записываете ли вы встречи и где лежат записи?

Вопросы и ответы

Как сделать протокол встречи с помощью ИИ?

Нужны запись встречи, распознавание речи и нейросеть. Запись превращается в текст с таймкодами, а нейросеть по нему составляет протокол: резюме разговора, договорённости и список задач. У нас 9 минут видео расшифровываются за 2 минуты, и протокол появляется в задаче проекта вскоре после звонка.

Как автоматически расшифровывать записи встреч и созвонов?

Запись загружают в рабочую систему, и сервис распознавания речи делает транскрибацию встречи за несколько минут. Текст сохраняется рядом с видео, по нему работает поиск, его можно выгрузить или передать нейросети. Удобнее всего, когда расшифровка встроена туда, где команда и так работает с задачами.

Можно ли встроить расшифровку встреч в свою систему управления проектами или CRM-систему?

Да, если в системе есть место для записей и к ней можно подключиться через API. Мы встроили расшифровку и протоколы в собственную систему управления проектами: запись загружается в задачу, текст и протокол появляются рядом с видео. Так же сервис можно подключить к CRM-системе или корпоративному хранилищу.

Насколько точно нейросеть распознаёт русскую речь?

Смысл разговора нейросеть передаёт, ошибки встречаются в профессиональных терминах и именах. В нашем тесте «верстальщик» превратился в «вистальщика». Для поиска, саммари встречи и протокола этого достаточно, дословные цитаты лучше сверять с записью.

Где хранятся записи совещаний и расшифровки и безопасно ли это для данных клиентов?

Записи совещаний и переговоров содержат персональные данные и коммерческую тайну, поэтому место хранения выбирают заранее. Мы сравнивали способы распознавания речи в том числе по тому, где окажутся данные, и рассматривали собственную модель на своём сервере. Для клиентов подбираем решение, при котором записи остаются в согласованном контуре.

Что делать, если сервис видеосвязи перестал присылать расшифровку?

Встроить транскрибацию встреч в свою систему. Записи у вас уже есть, нужны способ распознавания речи и место, где будет храниться текст. У нас разработка такого сервиса заняла 5 часов, и расшифровка заработала в тот же день.

Как ИИ для разработки ускоряет создание таких сервисов?

ИИ-агент для разработки берёт на себя рутину: сравнивает варианты, пишет код и автоматические тесты, проверяет и исправляет ошибки. Решения о том, какой вариант выбрать и где хранить данные, остаются за человеком. Сервис расшифровки встреч наш ИИ-агент собрал за 5 часов вместе с сотнями тестов.

Сколько стоит встроить ИИ для протоколирования совещаний?

Зависит от того, куда встраиваем расшифровку, сколько записей в месяц и где должны храниться данные. Начинаем с бесплатного онлайн-аудита процессов: смотрим, как у вас проходят встречи и совещания, где теряются договорённости, и собираем план первого этапа.

Другие кейсы

Встроим ИИ-протоколы и расшифровку встреч в ваши процессы

Подключим расшифровку записей и протоколы совещаний к вашей системе управления проектами или CRM-системе. Первый онлайн-аудит процессов бесплатный.

Бесплатный онлайн-аудит процессов →