Scalable and Distributed Optimization of Shared 3D Object Quality for Large-Scale Hybrid-Metaverses

国際会議 · 2024

Scalable and Distributed Optimization of Shared 3D Object Quality for Large-Scale Hybrid-Metaverses

Keywords

ハイブリッドメタバース映像品質最適化ニューラルネットワーク

Yui Maruyama , Tatsuya Amano , Hirozumi Yamaguchi

In Proc. of the 21st Annual IEEE International Conference on Sensing, Communication, and Networking (SECON 2024), pp. 1-9

DOI: 10.1109/SECON64284.2024.10934939

Abstract

Hybrid-metaverses, integrating physical and virtual spaces, face a critical challenge in managing shared 3D object quality across multiple users with diverse preferences and limited network resources. This paper addresses the problem of allocating limited bandwidth for transmitting point cloud representations while maximizing overall user satisfaction. We propose a distributed optimization method that dynamically adjusts 3D object quality based on contextual importance, available resources, and user preferences. Our approach uses Input Convex Neural Networks (ICNN) to model user utility functions and employs the Alternating Direction Method of Multipliers (ADMM) for distributed optimization. Key advantages include scalability, adaptability, and improved quality of experience. Evaluation using open dataset demonstrates significant improvements in user satisfaction and resource utilization compared to baseline approaches. Our method achieves 93-94.6% accuracy in modeling user utility and shows up to 60% faster convergence for scenarios with 30 users, contributing to the balance between high-fidelity representation and efficient data management in hybrid-metaverses.

解説

COVID-19の流行以降、遠隔交流のためのツールとしてメタバースに注目が集まっています。近年の3Dセンシング技術の発展により、現実の空間を常時3Dスキャンし、仮想空間で共有するという新たな遠隔交流システムが可能になりつつあります。我々は、このシステムを「ハイブリッドメタバース」と名付け、その実用化を目指す研究を行っています。
ハイブリッドメタバース実用化における最重要課題は、3D映像の通信量削減と映像品質維持の両立です。この実現のためには、データ容量を一定以下に抑える制約の下、映像品質を最適化する最適化問題を解く必要があります。最適化問題を定式化するためには、映像品質のモデリングが必要になりますが、映像品質は人間の主観であり単純な数式でのモデリングは難しく、ニューラルネットワークによるモデリングを行います。
ニューラルネットワークを活用した最適化により、複数のユーザが限られたネットワークリソースの下で3D映像品質を最適化するアルゴリズムを設計し、実装と性能評価を行っています。今後は、最適化手法を組み込んだハイブリッドメタバース全体の実装に取り組む予定です。


発表論文

  • 丸山結, 天野辰哉, & 山口弘純. (2024). 実空間融合型メタバースにおける共有オブジェクト品質の分散型最適化手法. 研究報告コンピュータセキュリティ (CSEC), 2024(37), 1-8.
新生活様式におけるコミュニティ形成のためのサイバーフィジカル空間共有基盤

新生活様式におけるコミュニティ形成のためのサイバーフィジカル空間共有基盤

NICT(情報通信研究機構) 高度通信・放送研究開発委託研究
ウイルス等感染症対策に資する情報通信技術の研究開発 課題C: アフターコロナ社会を形成するICT

A Simulation-based Framework for Dynamic Light Pollution Prediction in Urban Air Mobility

Ying Chieh Wang, Tatsuya Amano, Hirozumi Yamaguchi

2026 IEEE International Conference on Smart Computing (SmartComp), Messina, Italy, 2026, pp. 136-143

DOI 10.1109/SmartComp69968.2026.00029

Urban Air Mobility空飛ぶ車 +2

災害時LoRaネットワークのための環境認識型分散スケジューリング

Yuto Inaba, Tatsuya Amano, Akihito Hiromori, Hirozumi Yamaguchi

2026 IEEE International Conference on Pervasive Computing and Communications Workshops and other Affiliated Events (PerCom Workshops), SPT-IoT 2026, pp. 1366–1371

DOI 10.1109/PerComWorkshops68308.2026.11585469

災害通信LoRa +4

災害現場画像要約のための軽量Vision-Language Model

Hibiki Yoshizaki, Akira Uchiyama, Akihito Hiromori, Mineo Takai, Hirozumi Yamaguchi

2026 IEEE International Conference on Pervasive Computing and Communications Workshops and other Affiliated Events (PerCom Workshops), PerconAI 2026, pp. 1203–1208

DOI 10.1109/PerComWorkshops68308.2026.11585419

セマンティック通信災害対応 +4

物理モデル統合型深層学習による都市の土砂災害予測

Ren Ozeki, Hamada Rizk, Hirozumi Yamaguchi

2026 IEEE International Conference on Pervasive Computing and Communications Workshops and other Affiliated Events (PerCom Workshops), URBSENSE 2026, pp. 1094–1099

DOI 10.1109/PerComWorkshops68308.2026.11585337

土砂災害予測物理モデル統合学習 +3

超大規模衛星群の精密編隊飛行に向けたシミュレーションフレームワーク

Tatsuya Amano, Akihito Hiromori, Hirozumi Yamaguchi, Sumio Morioka

2026 IEEE International Conference on Pervasive Computing and Communications Workshops and other Affiliated Events (PerCom Workshops), PerVehicle , pp. 230–235

DOI 10.1109/PerComWorkshops68308.2026.11585321

衛星編隊飛行分散シミュレーション +4

レイトレーシング駆動型ISACレーダによるパターンベース車両認識

Heetae Jin, Akira Uchiyama

2026 IEEE International Conference on Pervasive Computing and Communications Workshops and other Affiliated Events (PerCom Workshops), PerRad 2026, pp. 328–333

DOI 10.1109/PerComWorkshops68308.2026.11585327

ISACBeyond 5G +4