適用製品
映像から人物オブジェクトを抽出し、動的な人物オブジェクトに対応する触覚メタデータを生成する触覚メタデータ生成装置、生成した触覚メタデータを基に触覚提示デバイスを駆動制御する映像触覚連動システム、及びプログラム
目的
映像から人物オブジェクトを自動抽出し、動的な人物オブジェクトに対応する触覚メタデータを同期して自動生成する触覚メタデータ生成装置、生成した触覚メタデータを基に触覚提示デバイスを駆動制御する映像触覚連動システム、及びプログラムを提供する。
効果
視覚・聴覚への情報提供のみならず、触覚にも訴えることで、視覚や聴覚に障害を持つ方々へもスポーツの状況を分かりやすく伝えることが可能となる。さらに、視覚・聴覚の感覚を有する健常者の方々にとっても、従来の映像視聴では伝えきれない臨場感や没入感を提供することができる。
技術概要
本発明の触覚メタデータ生成装置12は、入力映像から各人物の骨格座標集合を生成し可変の探索範囲で人物識別する人物骨格抽出部122及び人物識別部123、骨格軌跡集合の生成とその軌跡特徴量を基に人物動きの状況変化量と動作状況特徴量を生成する軌跡特徴量生成部124及び動作状況計測部128、各特徴量を基に機械学習により触覚提示デバイス用の情報を検出する人物動作認識部126、及び各種の触覚メタデータを生成するメタデータ生成部127,129を備える。本発明の映像触覚連動システム1は、触覚メタデータ生成装置12、及び触覚提示デバイス制御用の制御ユニット13を備える。