Generating Human Daily Activities with LLM for Smart Home Simulator Agents

国際会議 · 2024

Generating Human Daily Activities with LLM for Smart Home Simulator Agents

Keywords

大規模言語モデルエージェントベース・モデリングスマートホームシミュレーションデジタルツインサイバーフィジカルシステム

Haruki Yonekura , Fukuharu Tanaka , Teruhiro Mizumoto , Hirozumi Yamaguchi

The 20th International Conference on Intelligent Environments (IE2024)

Award Best Short Paper Award

DOI: 10.1109/IE61493.2024.10599909

Abstract

This paper presents a novel approach to smart home simulation by integrating Large Language Models (LLMs) for generating human daily schedules and activities of smart home simulator agents. The use of LLMs aims to reduce the complexity of user settings and increase the variety and generality of generated activities. This study explores the potential of LLMs to simulate human-like activity-generating by exploiting their experiential knowledge and adaptability. In addition, this paper discusses fine-tuning techniques for LLMs to optimize their performance within a simulator. By utilizing LoRA and task-specific fine-tuning datasets, while maintaining the ability to generate proper activities, we achieve as much as 4.3% performance improvement about the number of queries. Overall, the integration of LLMs into smart home simulators offers promising opportunities for enhancing the intelligence and adaptability of virtual agents in smart home environments.

解説

本研究は、大規模言語モデル(LLM: Large Language Model)を用いて、スマートホーム環境における居住者の人間的意思決定や日常行動をシミュレーションする手法を提案しています。近年、デジタルツインやエージェントベース・モデリング(ABM)が社会実装に向けて注目を集めていますが、既存のエージェントは行動様式が単純化されがちで、実際の人間の多様性を十分に再現できない課題がありました。本研究では、LLMを活用し、より人間中心型かつ柔軟な意思決定プロセスを模倣するアプローチを検討しています。


発表論文

  • 米倉晴紀, 田中福治, 水本旭洋, 山口弘純. (2023). スマートホームシミュレータにおける大規模言語モデルを用いた生活行動の自動生成に関する検討. 研究報告モバイルコンピューティングと新社会システム (MBL)2023(28), 1-8. https://ipsj.ixsq.nii.ac.jp/records/228980
  • H. Yonekura, F. Tanaka, T. Mizumoto and H. Yamaguchi, "Generating Human Daily Activities with LLM for Smart Home Simulator Agents," 2024 International Conference on Intelligent Environments (IE), Ljubljana, Slovenia, 2024, pp. 93-96, https://ieeexplore.ieee.org/document/10599909
地域を支える知のデジタライゼーションと共有基盤

地域を支える知のデジタライゼーションと共有基盤

JST(科学技術振興機構) 戦略的創造研究推進事業 CREST
「基礎理論とシステム基盤技術の融合によるSociety 5.0のための基盤ソフトウェアの創出」領域

A Simulation-based Framework for Dynamic Light Pollution Prediction in Urban Air Mobility

Ying Chieh Wang, Tatsuya Amano, Hirozumi Yamaguchi

2026 IEEE International Conference on Smart Computing (SmartComp), Messina, Italy, 2026, pp. 136-143

DOI 10.1109/SmartComp69968.2026.00029

Urban Air Mobility空飛ぶ車 +2

災害時LoRaネットワークのための環境認識型分散スケジューリング

Yuto Inaba, Tatsuya Amano, Akihito Hiromori, Hirozumi Yamaguchi

2026 IEEE International Conference on Pervasive Computing and Communications Workshops and other Affiliated Events (PerCom Workshops), SPT-IoT 2026, pp. 1366–1371

DOI 10.1109/PerComWorkshops68308.2026.11585469

災害通信LoRa +4

災害現場画像要約のための軽量Vision-Language Model

Hibiki Yoshizaki, Akira Uchiyama, Akihito Hiromori, Mineo Takai, Hirozumi Yamaguchi

2026 IEEE International Conference on Pervasive Computing and Communications Workshops and other Affiliated Events (PerCom Workshops), PerconAI 2026, pp. 1203–1208

DOI 10.1109/PerComWorkshops68308.2026.11585419

セマンティック通信災害対応 +4

物理モデル統合型深層学習による都市の土砂災害予測

Ren Ozeki, Hamada Rizk, Hirozumi Yamaguchi

2026 IEEE International Conference on Pervasive Computing and Communications Workshops and other Affiliated Events (PerCom Workshops), URBSENSE 2026, pp. 1094–1099

DOI 10.1109/PerComWorkshops68308.2026.11585337

土砂災害予測物理モデル統合学習 +3

超大規模衛星群の精密編隊飛行に向けたシミュレーションフレームワーク

Tatsuya Amano, Akihito Hiromori, Hirozumi Yamaguchi, Sumio Morioka

2026 IEEE International Conference on Pervasive Computing and Communications Workshops and other Affiliated Events (PerCom Workshops), PerVehicle , pp. 230–235

DOI 10.1109/PerComWorkshops68308.2026.11585321

衛星編隊飛行分散シミュレーション +4

レイトレーシング駆動型ISACレーダによるパターンベース車両認識

Heetae Jin, Akira Uchiyama

2026 IEEE International Conference on Pervasive Computing and Communications Workshops and other Affiliated Events (PerCom Workshops), PerRad 2026, pp. 328–333

DOI 10.1109/PerComWorkshops68308.2026.11585327

ISACBeyond 5G +4