協調的なインタラクションの記録と解釈

人と人のインタラクションにおける社会的プロトコルを分析・モデル化するために，開放的な空間における複数人のインタラクションを様々なセンサ群で記録し，蓄積された大量のデータに緩い構造を与えてインタラクションのコーパスを構築する手法を提案する．提案手法の特徴は，環境に遍在するカメラ/マイクなどのセンサ群に加えて，インタラクションの主体となるユーザが身につけるカメラ/マイク/生体センサを利用することで，同一イベントを複数のセンサ群が多角的に記録することである．また，赤外線IDタグシステムを利用して，各カメラの視野に入った人や物体のIDを自動認識することで，蓄積されるビデオデータに実時間でインデクスをつけることができる．本稿では，デモ展示会場における展示者と見学者のインタラクションを記録し，各人のビデオサマリを自動生成するシステムを紹介する．個人のビデオサマリを生成する際，本人のセンサデータだけでなく，インタラクションの相手のセンサデータも協調的に利用される．