Как создавалась умная камера Microsoft Surface Hub 2

Изображениe Microsoft

 
Microsoft поделился подробностями создания умной камеры Surface Hub 2 в интервью The Verge.

Камера оснащена 4K-сенсором 12Мп с диафрагмой f/1.8 и углом обзора 136°. По словам Стивена Батича, курирующего все разработки для аппаратных устройств Microsoft, особенной ее делают инновационные AI-технологии и собственная высококачественная оптика.

Microsoft спроектировал 11-элементную стеклянную линзу с супер резким фокусом. На самом деле объектив 184-градусный, но в оригинале формируется искаженное изображение с эффектом «рыбий глаз», который устраняется благодаря искусственному интеллекту. Финальная картинка обрезается до эквивалента 136°. Компенсируется также наклон, чтобы люди в кадре выглядели естественно независимо от местоположения относительно камеры. Рабочий диапазон Surface Hub 2 — до 8 метров.

За вычисления отвечает встроенный микрокомпьютер производительностью 1 терафлопс. Все операции проводятся непосредственно внутри камеры, данные не отправляются ни в облако, ни на подключенную цифровую доску Surface Hub.

Разработчики обучали камеру распознаванию людей аж в Новой Зеландии. На тот момент везде уже свирепствовал коронавирус, а в новозеландских офисах Microsoft еще водились люди.

Большое внимание уделяли разнообразию моделей, помещений и сценариев. Были учтены все расы, оттенки кожи, прически, всевозможные положения переговорщиков в пространстве и скучающие взгляды мимо камеры, специально нанимали актеров и актрис. Следили чтобы камера не дергалась, переключалась плавно, но не слишком медленно.

The Verge сделал акцент на том, что заглянувшие на совещание кошки и собаки не должны вызывать у искусственного интеллекта избыточной активности, так что можно сказать, что имела место даже дискриминация животных.

Камера крепится на дисплей при помощи магнитной клипсы, подключается через USB-C. Стивен Батич отметил, что можно попробовать подключить и напрямую к ПК, но изначально она разрабатывалась для просторных помещений и весь ее потенциал раскрывается только с Surface Hub.

Приобрести умную камеру можно будет отдельно по цене $800 или начиная с июня в комплекте с Surface Hub 2S за $22000.

Следите за нашими новостями в Телеграм и Яндекс.Дзен