У той час як користувачі повномасштабних установок доповненої реальності (AR) вже можуть «достукатися» і маніпулювати несправжніми об’єктами своїми руками, користувачі AR-систем на базі смартфонів обмежені використанням його сенсорного екрана. Скоро це може змінитися завдяки новій технології, яка розміщує їхні руки в картину доповненої реальності. Система називається Portal-ble і розробляється командою з Університету Брауна в Род-Айленді.
У її нинішньому вигляді вона складається зі смартфона на Android (версія для iOS знаходиться в розробці), інфрачервоного датчика Leap Motion, встановленого на задній панелі телефона, і Compute Stick, який підключений до телефона для забезпечення додаткової обчислювальної потужності. Дослідники сподіваються, що в кінцевому підсумку всю систему можна буде розмістити в звичайні готові смартфони.
Коли користувач витягає одну руку перед собою, датчик визначає положення цієї руки в тривимірному просторі. Програмне забезпечення відповідає, поміщаючи згенероване комп’ютером зображення руки в AR-середовище на екрані. Коли користувач згодом переміщує свою справжню руку, AR-рука змінює своє положення відповідним чином, дозволяючи йому піднімати, переміщати й іншим чином маніпулювати віртуальними об’єктами, які здаються існуючими. Принаймні на екрані телефона. Добровольці вже використовували цю технологію для виконання таких функцій, як укладання віртуальних блоків і малювання тривимірних віртуальних садів.
Portal-ble тепер розвивається і вихідний код Android доступний безкоштовно для тих, хто хоче поекспериментувати з ним. Система продемонстрована на відео нижче.