IEEE PerCom2024
国際会議IEEE PerCom2024（CORE A*会議）で本会議・ワークショップ含め4件の発表
研究発表
国際会議 · 2024
3D Point Cloud-Based Interaction System Bridging Physical Spaces in Virtual Environments
Abstract
Thanks to advancement of IT technologies, VR technologies and VR interfaces have been proposed to enhance interaction in virtual spaces. Conventional interaction systems using 3D images are limited to communicating in a static space, reproduced in advance in a virtual space. For more realistic interaction, it is important to capture the physical space around the participants and reproduce it in the virtual space. However, such new interaction methods trigger new privacy concerns. This study aims to develop an immersive spatial sharing system based on point cloud technologies. A prototype system incorporating LiDAR cameras and a mechanism to hide private objects was tested with 41 participants using VR headsets. The study gathered 16 family responses, indicating the system’s utility and the variation in privacy concerns based on gender, IT familiarity, and age. These insights are crucial for developing privacy filters in spatial sharing systems, especially for Metaverse interactions. We demonstrate our proposed system enhancing spatial sharing communication with 3D point clouds. The system integrates distant spaces, such as the venue and laboratory, in a virtual world. Participants can experience interactions along the scenario of a remote cooking class using the privacy-aware spatial sharing system through VR headsets.
解説
仮想空間でのやり取りを豊かにするための VR 技術やインタフェースは数多く提案されてきましたが、3 次元映像を使った従来の対話システムは、あらかじめ仮想空間に再現しておいた静的な空間の中で話すという形に留まっていました。より現実味のあるやり取りにするには、参加者の周囲にある物理空間をその場で取り込んで仮想空間に再現する必要があります。
本研究は、点群技術に基づく没入型の空間共有システムの開発を目的としています。LiDAR カメラと、プライバシー上の懸念がある物体を隠す仕組みを組み込んだ試作システムを作り、VR ヘッドセットを着けた 41 名で試験しました。16 家族から回答を得て、システムの有用性と、プライバシーへの懸念が性別、情報技術への慣れ、年齢によって変わることを確認しています。
デモンストレーションでは、会場と研究室という離れた場所を仮想世界の中で統合し、プライバシーに配慮した空間共有システムを通して遠隔の料理教室というシナリオに沿った体験を提供しました。点群で空間そのものを共有すると、相手の手元や道具の配置がそのまま見えるため、言葉で説明しなくても伝わる情報が増えます。料理という手順のある作業を題材にしたのは、その利点が分かりやすく出る場面だからです。
関連する研究室活動
関連プロジェクト
新生活様式におけるコミュニティ形成のためのサイバーフィジカル空間共有基盤
NICT（情報通信研究機構） 高度通信・放送研究開発委託研究
ウイルス等感染症対策に資する情報通信技術の研究開発 課題C: アフターコロナ社会を形成するICT
