Выделить главное: как ИИ помогает собрать ключевые фрагменты из видеоконференций

Современный мир трудно представить без видеозвонков. Ведь это удобный инструмент для обсуждения будущих планов, выполнения совместной работы и даже образовательной деятельности.

Сегодняшние сервисы, в том числе российские, предлагают различные удобства для эффективной коммуникации онлайн. Интересно и то, что такие платформы стремительно развиваются и внедряют передовые технологии, в том числе искусственный интеллект.

ИИ, как оказалось, можно применить и здесь. Те, кто часто посещают созвоны, могут согласиться, что раньше немало времени занимала обработка и расшифровка таких встреч, чтобы выделить главные тезисы прошедших обсуждений.

А сегодня алгоритмы всё это способны делать за человека, упрощая коммуникацию и повышая его продуктивность. Например, ИИ способен выделить ключевые фрагменты прошедших звонков и сформировать из них короткий ролик с основными тезисами.

Как это работает, коротко рассказываем на примере недавно представленных видеохайлайтов — функции, которую разработала MTS AI совместно с МТС Линк, отечественной экосистемой сервисов для бизнес-коммуникаций и совместной работы, предлагающей пользователям возможности проведения онлайн-встреч и занятий, а также вебинаров и прочего.

Функция доступна по запросу в службу технической поддержки МТС Линк.

Как это работает?

ИИ в МТС Линк уже умеет генерировать краткое текстовое содержание видеоконференции с основными моментами, выдават  автоматическую расшифровку, а также искать те или иные фрагменты по ключевым словам. В целом, разнообразие ИИ-функций здесь довольно насыщенное:

• Например: «умный зум», который автоматически фиксирует участника в центре кадра, ИИ-шумоподавление и даже ИИ-помощник в корпоративном мессенджере, генерирующий краткое содержание длинных переписок. Последняя фишка, правда, тоже в бета-тесте.

Следующим этапом стало внедрение  видеохайлайтов, просмотр которых не занимает много времени в отличие от полноценного изучения видеоконференции. Команда провела собственное исследование и рассказала, что с необходимостью смотреть пропущенные рабочие встречи сталкиваются 93% пользователей:

В среднем такая потребность возникает 3-4 раза в месяц, но значительная доля пользователей смотрит записи несколько раз в неделю.

В реализации видеохайлайтов вновь пригодился ИИ. Он буквально способен выделять из всей встречи важные моменты и тезисы обсуждений, а далее — формировать из этого короткий клип.

Чтобы это работало, команда MTS AI разработала специальный классификатор текстов на базе машинного обучения. В мире ИИ-технологий классификация текста означает задействование методов обработки естественного языка. Такие технологии применяются в том числе для работы с устной и письменной речью.

Как на деле? Такие алгоритмы умеют предсказывать наиболее подходящие категории для текста. В современных программах обычно это задействуется в различных функциях. Например, в почтовых сервисах ИИ таким образом помогает обнаружить спам, а в файлообменниках — сортировать по категориям документы.

Разработанный классификатор текста позволил определять смысл и важность каждой реплики, озвучиваемой в видеоконференции. Его обучили на основе 200 расшифровок внутренних встреч продолжительностью до одного часа.

Создавая классификатор, специалисты предварительно разметили данные по следующим пяти ключевым категориям событий — оглашение повестки встречи, принятие важных решений, предложение идей, выражение согласия или возражения, а также смена эмоций в процессе разговора.

Если говорить простыми словами, то искусственный интеллект понимает, в какой момент обсуждается повестка созвона или, допустим, в какой момент один из участников предлагает какую-либо идею. Все эти важные тезисы и собираются в единый видеоклип.

Что интересно, для обучения классификатора текста учитывался и контекст из соседних реплик. Такой подход дал модели возможность эффективно захватывать сложные зависимости в обрабатываемых данных и позволил увеличить точность классификации текста.

Повестка встречи на видеоконференции и её итоги стали основными фрагментами, из которых сейчас составляются видеохайлайты. Выбор именно этих фрагментов позволил сервису оптимизировать длительность самих видеохайлайтов.

При этом использование технологии при необходимости можно расширить, подключив и остальные упомянутые выше категории.

Как подключается?

Для подключения видеохайлайтов нужно написать в службу технической поддержки. Чтобы начать работать с видеохайлайтами, следует выполнить несколько простых действий:

1. Нужно перейти в запись встречи в «Личном кабинете». Важно: во время самой встречи нужно не забыть включить текстовую расшифровку, иначе хайлайты не сгенерируются.

2. Далее остаётся нажать на кнопку «Проигрывать ключевые моменты».

3. После чего будет доступен короткий клип всей видеоконференции.

Что в итоге?

Ещё одна ИИ-функция принесёт тысячам пользователей заметную пользу, так как сокращается время на просмотр прошедших записей и можно не заходить на встречи, которые носят лишь информационный характер.

Также это полезно при возвращении к старым записям — то, что обсуждалось месяц назад, получится вспомнить за несколько минут. В очередной раз ИИ упрощает жизнь: приятно, что подобные возможности становятся доступными и в отечественных сервисах в том числе благодаря MTS AI.