概要
Temporal action proposalのタスク。従来のような始点終点予測とは別に,Proposalの始点と長さを表すヒートマップを作成する。最終的に始点終点情報とヒートマップのConfidenceを組み合わせることで,Proposalを出してくる手法を提案。
手法
ネットワーク全体の概要は以下の通り。
ヒートマップは始点を横軸,Proposalの長さを縦軸として予測される。つまり同一の始点から始まる長さの違うProposalについても,ヒートマップを利用することによってConfidenceの算出が容易となる。このようにヒートマップはconfidenceのスコアを測るために用いる。
実験
ActivityNetを用いて他手法との比較。
出力例
新規性
ヒートマップを用いたConfidenceの算出