Перед вами интерфейс смешанной реальности, разработанный несколько лет назад в лаборатории Наемура (Naemura Lab) при Токийском университете. Виртуальный персонаж может взаимодействовать с различными поверхностями и предметами, в том числе с человеческими руками. В качестве описания проекта приведём слова его создателей:
В последнее время были разработаны устройства, которые могут формировать изображения в воздухе. Мы использовали одно из них и соединили его с датчиками и проектором, чтобы создать интуитивно понятный опыт взаимодействия, где картина в воздухе ловко объединена с реальным миром.
C используемым здесь оптическим устройством (Kinect — прим. ред.) позиция картинки определяется расстоянием между дисплеем и самим устройством. Таким образом мы можем изменить положение изображения, изменив положение дисплея. Мы использовали это, чтобы заставить персонажа выглядеть, будто он движется вперёд и назад — с помощью подключения дисплея к приводу для его физического перемещения.
По одной лишь картинке в воздухе человеческому глазу трудно понять, где находится персонаж, и мы отдельно проецируем тень. Это облегчает восприятие глубины.