FEEL TECH Wear

2024
XR
Haptics
No items found.

FEEL TECH Wear : Enhancing Mixed Reality Experience with Wrist to Finger Haptic Attribution

Description:

FEEL TECH Wear is a system that facilitates haptic interactions while keeping most of the palm free, by presenting directional force through rotational skin-stretch distribution feedback to the wrist and providing texture sensation through vibration feedback to the fingertips. With advancements in hand tracking and passthrough technologies, hand interactions in Mixed Reality (MR) environments have become more accessible, necessitating palm-free haptic feedback methods that do not hinder interactions with real objects or impair vision-based hand tracking. The hardware of FEEL TECH Wear primarily consists of two components: a hand-mounted device for each hand and a control unit located at the back of the head. The hand-mounted device is equipped with four channels of rotational skin-stretch tactors at the wrist and vibration tactors at the thumb and index finger. Using FEEL TECH Wear, three applications have been realized: haptic feedback for virtual objects, haptic augmentation for real objects, and haptic guidance towards objects.

FEEL TECH Wearは、手首への回転皮膚伸縮分布フィードバックを通じて方向力を提示し、指先への振動フィードバックを通じて質感感覚を提供することで、手のひらの大部分をフリーに保ちながら触覚インタラクションを行うシステムである。ハンドトラッキングとパススルー技術の進歩により、複合現実感(MR)環境におけるハンドインタラクションはより身近なものとなり、リアルオブジェクトとのインタラクションを妨げず、視覚ベースのハンドトラッキングを損なわない、手のひらを使わない触覚フィードバック方法が必要とされる。FEEL TECH Wearのハードウェアは、主に両手用のハンドマウントデバイスと、後頭部に位置するコントロールユニットの2つの要素で構成されている。手部装着デバイスには、手首に4チャンネルの回転皮膚せん断タクタ、親指と人差し指に振動タクタが装備されている。

Applications:

MR. Dog: Mixed Reality Haptic Interaction with Virtual Dog was created with the Unity game engine as part of the FEEL TECH Wear project. With MR. Dog, it is possible to perform haptic communication that occurs during hand interaction with virtual objects, such as petting a virtual dog or tugging on a toy string, through the FEEL TECH Wear device. It is also possible to feed the virtual dog with dog food or take it for a walk using a real bottle or leash, and the FEEL TECH Wear device can do haptic augmentation to real objects. The haptic feedback in these interactions is real time rendered within the Unity game engine using the relative speed between the virtual hands and the virtual objects.

MR. Dog : Mixed Reality Haptic Interaction with Virtual DogはFEEL TECH Wearプロジェクトのコンテンツの一部としてUnityゲームエンジンで制作された。MR. DogではFEEL TECH Wearデバイスを通じてバーチャル犬を撫でたり、おもちゃの紐を引っ張り合ったりなど、バーチャルオブジェクトとのハンドインタラクション時に生じる触覚コミュニケーションを行うことが可能である。また、リアルのボトルやリードを使ってバーチャル犬にドッグフードをあげたり、散歩をしに行ったりすることも可能であり、FEEL TECH Wearデバイスによって触覚情報をリアルオブジェクトに付与することが可能である。これらのインタラクションにおける触覚フィードバックは、バーチャルハンドとバーチャルオブジェクトとの相対速度を用いてUnityゲームエンジン内でリアルタイムにレンダリングされる。

Contributors

梅原路旦 Rodan Umehara
田口晴信 Harunobu Taguchi
堀江新 Arata Horie
神山友輔 (SPLINE DESIGN HUB Corp.) Yusuke Kamiyama
阪本真 (SPLINE DESIGN HUB Corp.) Shin Sakamoto
石川博規 (NTT DOCOMO, INC.) Hironori Ishikawa
南澤孝太 Kouta Minamizawa

Collaborators
Exhibitions & Publications
Media & Awards
More Info