Роман Лебедев, Дмитрий Балиев — ML-обработка медиапотоков в браузере на примере конференций SberJazz

— —

Спикеры рассказывают, как внедряли в SberJazz обработку видео и аудио на примере технологии замены фона. Узнаем про захват и работу с видео/аудио в веб-браузере, интеграцию высокопроизводительных модулей (WASM, ML-рантаймов), обучение и оптимизацию ML-моделей для работы на клиенте.

Дмитрий и Роман показывают, как можно собрать свой пайплайн обработки медиа для вашего продукта. Подробно обсуждаем, почему они разработали свой внутренний движок для запуска ML-моделей и обработки на GPU с использованием WebGL.

#ml #videoconference