Zoom заказал сравнительный тест ИИ-помощников, в котором сам же и победил

Дата публикации:

Лаборатория TestDevLab в сентябре 2024 года провела сравнительные испытания ИИ-функционала Zoom, Microsoft Teams и Cisco Webex.

Что оценивали

— Полноту и точность стенограммы встречи.
— Резюме ключевых моментов, решений и действий, которые нужно предпринять.
— Взаимодействие ИИ-помощника с участниками: ответы на запросы, предложенные действия, полезность подсказок.

Как тестировали

Предварительно записали на английском языке:
— Разговор двух человек на актуальную тему.
— Сессию мозгового штурма с участием четырех человек.
— Структурированную встречу на 16 человек по конкретной теме.

Имитировали живой звонок с помощью предварительно записанного звука на оборудовании и с учеток лаборатории.

Итоги

Zoom оказался впереди по всем параметрам.

Количество ошибок в словах (WER):
7,40% — Zoom
10,16% — Webex
11,54% — Microsoft Teams

Точность транскрипции с точки зрения контекста, грамматики, построения фраз и общего смысла:
99,05% — Zoom
98,98% — Microsoft Teams
98,71% — Webex

Резюме встречи, суммарный рейтинг по ряду параметров:
81,35% — Zoom
80,73% — Microsoft Copilot
80,20% — Webex
78,63% — Microsoft Teams (Intelligent Recap)

Задержка отклика разговорного ИИ:
4716,1 мс — Zoom
5327,9 мс — Webex
9269,9 мс — Microsoft Teams

Подробности

Следите за нашими новостями в Телеграм и Яндекс.Дзен