目的
動画全体にわたる時間情報を少ない計算量で取得し、学習効果を高めて、動画の分類精度を向上させる、情報分類装置、学習装置、及びプログラムを提供する。
効果
計算量の増大を抑えつつ、学習効果を高め、動画の分類精度を向上させることができる。
技術概要
入力された動画データをテンソルに変換するテンソル化部と、
テンソル化された前記動画データから、前記動画データに含まれる情報を分類する、複数の層からなるベースモデルと、
前記ベースモデルの第n層から出力された中間テンソルを入力とし、前記中間テンソルから、前記動画データの全フレームとの相関情報を含む時間相関特徴統合中間テンソルを生成し、前記ベースモデルの第n+1層に出力する、時間相関ブロックとを備え、
前記ベースモデルの出力層から、分類結果を出力する情報分類装置において、
前記時間相関ブロックは、
参照信号と前記中間テンソルとの時間方向の相関を計算し、時間相関テンソルを出力する時間相関計算部と、
前記時間相関テンソルを、一つのテンソルに統合し、統合テンソルとする時間相関統合部と、
前記統合テンソルに基づいて、前記動画データの時間相関特徴を示す時間相関特徴テンソルを計算する時間相関特徴計算部と、
前記時間相関特徴テンソルと前記中間テンソルとを一つのテンソルに統合し、時間相関特徴統合中間テンソルを生成する時間相関特徴統合部と
を備えることを特徴とする、情報分類装置。