報告書番号

R02028

タイトル（和文）

簡易な複合現実環境生成システムによるシナリオに基づく訓練環境の構築

タイトル（英文）

Development of Scenario Based Training Environment by Mixed Reality System

概要 （図表や脚注は「報告書全文」に掲載しております）

当所では、物体画像にCG (Computer Graphics)や現場画像を合成する複合現実を利用した複合現実環境生成システムを開発してきた。このシステムはCGや画像を使う従来のバーチャルリアリティ技術を基本としつつ、操作感覚が必要な訓練場面では、操作対象である実物体を使い、操作に直接関係しない部分をCGや現場画像で代用する仕組みとなっている。特に、特殊なセンサやマーカーを使うことなく、カメラで撮影した操作対象を認識することで、多彩な訓練が簡易に実現できるシステムとなっている。本報告書では、複合現実環境生成システムにより、臨場感と操作感のある、シナリオベースの訓練環境が構築できることを6種類の評価用訓練シナリオにより検証した結果を示す。

概要 （英文）

We developed a support system for maintenance training of electric power facilities by Mixed Reality. A user of the system wears a Head-Mounted Display (HMD) with a small camera, puts a sensor on top of one’s head and stands in front of a blue screen. The system recognizes an object and estimates its position and pose from an image that is captured by the small camera. The object recognition and the position-pose estimation are performed by image processing. After the object recognition and the position-pose estimation, the system overlays computer graphics to the object images. The computer graphics show operational guidance, instructions, or dynamic inside movements of the object on the HMD. In this paper, we describe an outline of the system and validation results of the system functions by several training scenarios. The validation results show that the support system can be used as an educational training tool of novice engineers.

報告者

キーワード