適用製品
ロボットの発話動作を制御するための装置、方法及びプログラム
目的
人と一緒にテレビを視聴するロボットが、複数のユーザの中から発話する対象者及びタイミングを決定できる発話制御装置、発話制御方法及び発話制御プログラムを提供する。
効果
人と一緒にテレビを視聴するロボットが、複数のユーザの中から発話する対象者を決定できる。
技術概要
ロボットの周囲を撮像した画像からユーザを検出するユーザ検出部と、
前記画像からテレビを検出するテレビ検出部と、
前記ユーザ及び前記テレビの位置情報を方向情報に変換する方向情報変換部と、
前記ロボットの周囲から収音した音声のうち、前記テレビの方向からの音声入力を減衰させたうえで、音源定位により前記ユーザごとの方向に分類された音声情報を取得する音声解析部と、
前記ユーザそれぞれの方向を撮像した時系列の複数の画像フレームに基づいて、当該ユーザの行動を学習モデルにより取得する行動推定部と、
前記ユーザごとに分類された音声情報に基づいて発話頻度を算出し、当該発話頻度が閾値以下のユーザを、前記ロボットが発話する対象ユーザとして決定する発話判定部と、
前記ユーザの行動ごとに予め定義された傾聴係数の値に応じて、所定の発話動作を前記ロボットに実行させる発話実行部と、を備える発話制御装置。