Кодек Avatars 2.0: Meta стремится к реализму в метавселенной

Мета-инженеры приближаются к некоторой форме реализма для метавселенной с помощью Codec Avatars 2.0, прототипа VR-аватаров, использующих передовые методы машинного обучения.

Три года назад Facebook, дочерняя компания Meta, представила свою работу с Codec Avatars. При поддержке нескольких нейронных сетей аватары генерируются с помощью специализированного устройства захвата со 171 камерой. После создания ими можно управлять в режиме реального времени с помощью прототипа виртуальной гарнитуры с пятью камерами (две внутренние для каждого глаза и три внешние для нижней части лица). С тех пор команды, стоящие за проектом, внесли в систему несколько улучшений, в том числе более реалистичные глаза и версию, требующую только отслеживания глаз и ввода с микрофона.

В апреле прошлого года на семинаре Массачусетского технологического института «Виртуальные существа и быть виртуальным» Ясер Шейх представил новую версию Codec Avatars. Несмотря на крупные и важные разработки, впереди еще долгий путь: «Я бы сказал, что одна из больших задач следующего десятилетия — посмотреть, сможем ли мы обеспечить удаленное взаимодействие, неотличимое от общения лицом к лицу». Во время семинара он отметил, что невозможно предсказать, как скоро на самом деле будут выпущены Codec Avatars. Однако он сказал, что когда проект начинался, нужно было совершить десять чудес, а теперь он думает, что их пять.

Реалистичные аватары с Avatars Codec 2.0 для Meta

Однако Codec Avatars 2.0 может быть автономным решением, а не прямым обновлением текущих мультипликационных аватаров. В интервью Лексу Фридману генеральный директор Марк Цукерберг описал будущее, в котором пользователи смогут использовать аватар в мультяшном стиле в казуальных играх и реалистичный аватар на деловых встречах.