The Malleable-Self Experience

2024
XR
Haptics
No items found.

The Malleable-Self Experience: Transforming Body Image by Integrating Visual and Whole-Body Haptic StimuliDescription:

The Malleable-Self Experience comprises the integration of the visual element of virtual reality (VR) with the whole-body haptic sensations of the Synesthesia X1 haptic chair*. The goal is to induce a provocative experience that expands one’s understanding of the self by creating a malleable perception of the body image. We explore the effects of visual and whole-body haptic integration on augmenting body image during dynamic transformations of visual representations of the body in VR. We design the plausibility of these perceptual augmentations using a specific sequence of multisensory events: (1) establishing body ownership of a virtual body anchored in the same self-located space as the participant, (2) separating the virtual body to hover above the participant’s physical body, enhanced by accompanying haptic stimuli to increase proprioceptive uncertainty, and (3) transforming the virtual body with integrated visuo-haptic stimuli to sustain perceptual congruency.

*HW and SW platform developed by Synesthesia Lab

「The Malleable-Self Experience」は、VRアバターの映像表現と、Synesthesia Labが開発した全身触覚チェア Synesthesia X1による全身の触覚表現を組み合わせた体験である。これによって、自分の身体イメージが変容する感覚を引き起こし、自己についての理解を深めることを目指している。 

この体験は、VRアバター表現・音楽・全身触覚を組み合わせた3つの要素に基づいて設計しました:
(1) 参加者が自分の身体とVRアバターが自分のものだと感じること、
(2) 参加者から体外離脱したVRアバターが、全身触覚によって自分の身体の一部だと感じ続けること
(3) VRアバター表現・音楽・全身触覚と連動してVRアバターの形状が変化することに伴って、身体感覚も柔軟に変化していると感じること 

これらの要素によって、VRアバターの見た目が動的に変化する際に、映像表現と音楽・全身触覚を統合することで、身体イメージがどのように変容・拡張されるかを探求している。

Contributors

Tanner Person
花光 宣尚 (Enhance Experience Inc. / KMD) Nobuhisa Hanamitsu
Danny Hynds
脇坂 崇平 Sohei Wakisaka
磯部 宏太 (Enhance Experience Inc.) Kota Isobe
望月 レオナルド (Enhance Experience Inc.) Leonard Mochizuki
水口 哲也 (Enhance Experience Inc.) Tetsuya Mizuguchi(Enhance Experience Inc. / KMD)
南澤 孝太 Kouta Minamizawa

Collaborators
Exhibitions & Publications

https://s2024.conference-program.org/presentation/?id=gensub_256&sess=sess213

Tanner Person, Nobuhisa Hanamitsu, Danny Hynds, Sohei Wakisaka, Kota Isobe, Leonard Mochizuki, Tetsuya Mizuguchi, and Kouta Minamizawa. 2024. The Malleable-Self Experience: Transforming Body Image by Integrating Visual and Whole-Body Haptic Stimuli. In ACM SIGGRAPH 2024 Emerging Technologies (SIGGRAPH '24). Association for Computing Machinery, New York, NY, USA, Article 20, 1–2. https://doi.org/10.1145/3641517.3664385

Media & Awards
More Info