Meta подала патент на метод відтворення функції EyeSight від Vision Pro у власних гарнітурах віртуальної реальності. Ця функція використовує сканування обличчя користувача для створення віртуального зображення його очей на зовнішньому дисплеї, що, за словами розробників, допомагає підтримувати зв’язок із реальним світом під час використання VR.
Хоча Meta прагне вдосконалити свої гарнітури Quest за допомогою EyeSight, важливо зазначити, що варіант від Vision Pro отримав неоднозначні відгуки після його випуску. Багато рецензентів критикували цю функцію, стверджуючи, що вона не відповідає очікуванням і робить дизайн гарнітури громіздким.
Патент Meta під офіційною назвою «Вбудовані датчики в гарнітуру з ефектом занурення для соціальної присутності» описує методи реалізації такої функції. У ньому також обговорюється можлива модернізація існуючих гарнітур Quest або розробка нового дизайну для підтримки цієї технології.
На відміну від EyeSight, у патенті Meta згадуються датчики здоров’я, які можна інтегрувати в інтерфейс гарнітури.
Патент Meta описує метод оновлення аватара користувача в режимі реального часу на основі його виразу обличчя. Це досягається за допомогою датчиків на передньому інтерфейсі гарнітури, які відстежують рухи м’язів обличчя. Потім алгоритм машинного навчання використовує ці дані, щоб визначити вираз обличчя та відповідно оновити аватар.
Деякі додаткові відомості з Meta:
- Гарнітура включатиме різні датчики, такі як датчики ЕКГ, ЕЕГ і PPG, для оцінки стану серцево-судинної системи користувача.
- Алгоритм машинного навчання буде навчено на величезному наборі даних зображень облич і відповідних виразів.
- Аватар користувача буде відображатися в додатках віртуальної реальності, розміщених на віддалених серверах.