В России впервые провели стрим в расширенной реальности (XR) на базе Unreal Engine

Бренд М.Видео первым в России реализовал VTubing проект с участием инфлюенсеров и своего виртуального амбассадора – Эм.Ви. Для «оживления» цифрового персонажа в стриме о профессиях будущего использовалась компьютерная графика с технологией захвата движения. Эм.Ви и приглашённые гости обсудили актуальные гаджеты, разыграли подарки среди подписчиков, а также выяснили, какие навыки и технологии помогут добиться успеха в будущем. Эфир прошёл на площадке VK в сообществе М.Видео и собрал более 8 млн зрителей.

Гостями прямого эфира стали представители популярных сфер массмедиа: дизайнер интерьеров Михаил Шапошников, стример Алексей Пчёлкин, а также блогер Даша Блохина. В масштабной брендированной 3D-студии Эм.Ви и гости провели целых полтора часа: общались, разыгрывали подарки, тестировали новые гаджеты: Samsung Galaxy Z Fold5| Z Flip 5, планшет Galaxy Tab S9 и умные Galaxy Watch6. 

Благодаря специально разработанному ПО, технологии motion capture и ИИ-моделям обработки речи Эм.Ви смогла самостоятельно вести прямой эфир и общаться с подписчиками. RnD-департамент ITSALIVE и М.Видео в течение двух месяцев кастомизировали игровой движок Unreal Engine, чтобы добиться потокового видео с реалистичным качеством и частотой кадров 25к/сек. VTuber не только получила реалистичную внешность, корректную симуляцию волос и одежды, но и ответила на вопросы в прямом эфире, не будучи 2D-аватаром или заранее предзаписанной 3D-моделью.

Для оживления Эм.Ви была использована технология «захвата актёрской игры», в частности, мокап-костюм, перчатки и специальный шлем, которые записывали движения рта, глаз и другую мельчайшую мимику. Три камеры транслировали живого гостя в виртуальный фон в прямом эфире. Команда виртуального производства TDS впервые работала на трёх серверах эфира, а самой непростой задачей стало поддержание реального диалога с нереальной ведущей.