Apple подала патент на гарнітуру змішаної реальності, яка містить датчики для відстеження рис обличчя, очей і рук користувача. Він є частиною довгого ланцюжка патентів зі змішаної (або доповненої) реальності, і, як й інші, вказує на те, що компанія широко досліджує, як доповнена реальність може відображатись зі смартфонів на окуляри.
Як працює система Apple
Патент «Система відображення з датчиками» охоплює дисплей, що встановлюється на голові. Система містить набір камер й інших датчиків, які відстежують зовнішнє середовище, а також датчики, які відстежують очі користувача. Всі компоненти працюють разом для відображення віртуального тривимірного зображення, яке якимсь чином засноване на реальному світі. Крім цього, є багато інших потенційних варіацій. Гарнітура може містити ручні датчики, «датчики пози голови», датчики, які збирають детальну інформацію про реальні умови освітлення, «датчики брів» і «датчики нижньої щелепи», які відстежують рух рота і щелепи.
Компанія описує систему, що відрізняється від більшості окулярів AR, які зазвичай проектують часткові зображення. Принаймні, один варіант її системи використовує наскрізне відео, в якому камери захоплюють відео, потім гарнітура створює на ньому цифрові об’єкти і відображає отримані зображення на екрані, подібному віртуальній реальності. Це відповідає більш ранньому звіту CNET, в якому говорилося, що Apple тестує комбіновану гарнітуру VR/AR. Проте, патент є відкритим, і це тільки один з багатьох варіантів.
Тим часом датчики для брів і щелеп були б доцільними для перенесення аватарів Animoji і Memoji в гарнітуру. Ми знаємо, що конкурент Apple, Facebook вже створює VR-гарнітури, які можуть відстежувати вирази обличчя і переводити їх у віртуальні аватари. А відстеження рук – це добре зарекомендований варіант керування для VR і AR, хоча він як і раніше не є основним варіантом для будь-яких великих пристроїв.
Як завжди, ми не знаємо, чи розробляє Apple продукти на основі цих патентів. Цього місяця стало відомо, що Apple призупинила свої плани щодо окулярів AR, хоча це досі залишається непідтвердженою інформацією. Тож, є підстави сумніватися в тому, що компанія відмовляється від проекту.