Meta* представила технологию «голографической» пространственной видеосвязи Hologram Calling. Во время разговора пользователь VR Glasses сможет видеть собеседника в натуральную величину как фотореалистичное цифровое представление. Система должна передавать движения, мимику и направление взгляда, а пространственный звук — создавать впечатление, будто голос идёт непосредственно от изображения человека.

Вместо постоянной съёмки лица внешней камерой технология использует камеры очков для отслеживания мимики, а встроенные датчики — для фиксации движений головы и глаз. Генеративный искусственный интеллект формирует синтезированное видео на основе заранее созданного цифрового представления человека и данных, поступающих во время разговора.

Сторонние приложения не получат доступ к отслеживанию лица для видеоконференций. При этом звонки можно будет проводить через WhatsApp, Zoom и другие приложения: операционная система, вероятно, будет передавать им уже обработанные данные. Участники, подключившиеся со смартфона или компьютера, увидят цифрового собеседника на обычном плоском экране.

Ограничения первой версии

Название Hologram Calling не означает, что на первом этапе система создаёт полноценную объёмную модель человека. Изображение представляет собой стереоскопический видеопоток с фоном, который формирует иллюзию трёхмерности.

По данным независимого тестирования, технология убедительно воспроизводит лицо, когда зритель сохраняет неподвижное положение. Если наблюдатель перемещается в сторону, изображение поворачивается вслед за ним, поскольку система пока не позволяет рассматривать цифрового собеседника с разных ракурсов. Кроме того, у лица заметны недостатки детализации.

Разработчики намерены со временем перейти к полноценному объёмному представлению, но сроки такого обновления не указаны. Очки VR Glasses, для которых предназначена функция, должны поступить в продажу весной 2027 года.

Связь с Codec Avatars

Ранее сообщалось об экспериментальной технологии Codec Avatars. Она использует нейронные сети для воспроизведения фотореалистичных людей в трёхмерном пространстве. Hologram Calling применяет другой подход, рассчитанный на более компактные потребительские устройства.

*Meta признана экстремистской организацией и запрещена в России.

Meta признана экстремистской организацией в России