Osegi
Железо·1 мин чтения

BlanchTouch превращает стены и столы в сенсорные поверхности для AR

Учёные Университета Тохоку создали BlanchTouch — ИИ-систему, с помощью которой AR- и MR-гарнитуры распознают касания на обычных стенах и столах без датчиков.

A user wearing an AR headset presses a fingertip against an office wall to control a virtual menu.
Фото: اليوم السابع
SUMODialoediviewergiftdetect

Исследователи японского Университета Тохоку разработали технологию BlanchTouch, которая превращает обычные поверхности — стены, столы, перегородки — в зоны управления касанием. Датчики и дополнительные устройства для этого не нужны: система опирается на искусственный интеллект и камеры гарнитур дополненной (AR) и смешанной (MR) реальности.

Как это работает

Метод использует естественный эффект: когда палец прижимается к твёрдой поверхности, кончик на мгновение белеет из-за изменения кровотока. Модель ИИ анализирует изображения с камер гарнитуры, замечает это изменение цвета и определяет момент контакта пальца с поверхностью. Затем система отслеживания рук находит положение пальца, а движение превращается в цифровую команду — например, нажатие виртуальной кнопки или выбор пункта меню.

На стену или стол не нужно наклеивать маркеры или устанавливать датчики, а каждую поверхность не требуется предварительно калибровать.

Зачем это нужно

BlanchTouch призван решить проблемы управления в AR и MR. Обычно приходится двигать руками в воздухе или использовать отдельные контроллеры, а долгое удержание рук на весу утомляет. Жесты в воздухе к тому же не дают физического ощущения касания реальной поверхности. Новая технология позволяет опирать пальцы о стол или стену при работе с виртуальным интерфейсом, что удобнее и естественнее.

Исследователи проверили систему на разных поверхностях и материалах. По данным работы, опубликованной в материалах конференции IEEE по виртуальной реальности и 3D-интерфейсам 2026 года, средняя ошибка определения точки касания составила 5,33 мм, а полнота обнаружения (recall) — 97,88%. Участники эксперимента выполняли задачи на обычных поверхностях.

Ограничения

Технология может пригодиться в офисах, классах и на рабочих местах — для управления виртуальными клавиатурами и меню — и снизить зависимость от традиционных контроллеров. Однако это не значит, что любой экран станет сенсорным после установки приложения: пока для работы нужны AR- или MR-устройства с камерами отслеживания рук.

Приложения, на которые стоит взглянуть

SUMO: числовая головоломка

Выбирайте нужные клетки, складывайте, достигайте цели. Легко понять, сложно освоить. Бесплатно, для любого возраста.

Теги:tohoku universityblanchtouchaugmented realitymixed realityieee vr 2026hand tracking

Ещё за этот день

Показать все →

Ещё в рубрике: Железо

Показать все →