Лаборатория TestDevLab в сентябре 2024 года провела сравнительные испытания ИИ-функционала Zoom, Microsoft Teams и Cisco Webex.
Что оценивали
— Полноту и точность стенограммы встречи.
— Резюме ключевых моментов, решений и действий, которые нужно предпринять.
— Взаимодействие ИИ-помощника с участниками: ответы на запросы, предложенные действия, полезность подсказок.
Как тестировали
Предварительно записали на английском языке:
— Разговор двух человек на актуальную тему.
— Сессию мозгового штурма с участием четырех человек.
— Структурированную встречу на 16 человек по конкретной теме.
Имитировали живой звонок с помощью предварительно записанного звука на оборудовании и с учеток лаборатории.
Итоги
Zoom оказался впереди по всем параметрам.
Количество ошибок в словах (WER):
7,40% — Zoom
10,16% — Webex
11,54% — Microsoft Teams
Точность транскрипции с точки зрения контекста, грамматики, построения фраз и общего смысла:
99,05% — Zoom
98,98% — Microsoft Teams
98,71% — Webex
Резюме встречи, суммарный рейтинг по ряду параметров:
81,35% — Zoom
80,73% — Microsoft Copilot
80,20% — Webex
78,63% — Microsoft Teams (Intelligent Recap)
Задержка отклика разговорного ИИ:
4716,1 мс — Zoom
5327,9 мс — Webex
9269,9 мс — Microsoft Teams
Следите за нашими новостями в Телеграм и Яндекс.Дзен