Вот я тут пишу

Вот я тут пишу про нейромокапы, которые восстанавливают движение тела и лица с видео.
А есть некоторое количество альтернативных подходов.

Помните, что Эппле запатентовала умные наушники, которые умеют снимать ЭЭГ, через ухо (ближе к мозгу, миниатюрный дизайн).

Оказывается можно предсказывать выражение лица по форме (по изменению формы) ушного канала.

Держите работу по реконструкции лица с помощью внутриушных акустических датчиков, встроенных в наушники. Тут и отслеживание выражения лица, пользовательские интерфейсы, AR/VR-приложения, аффективные вычисления и т. д. Традиционные решения на основе видео и компьютерного зрения не работают при плохом освещении и окклюзиях, а имеют проблемы с конфиденциальностью. А решения для наушников устойчивы к условиям окружающей среды, сохраняя при этом приватность.

И вот это уже интересно!!
Вместо лыжной маски или потного шлема (или даже иголочки от Маска) - наушники-затычки в уши, которые майнят информацию из мозга(ЭЭГ), от мышц, из звука и выдают вам цифрового двойника со всеми его фонемами, выражениями и даже эмоциями (в пределе и мыслями, не зря Эппле патентует ЭЭГ через ухо).

В общем, такой метаверс нам нужен! Ну и не забудьте почитать вот этот пост

https://dl.acm.org/doi/abs/10.1145/3614438