BMN: Boundary-Matching Network for Temporal Action Proposal Generation

Type
Publication
In ICCV 2019

概要

Temporal action proposalのタスク。従来のような始点終点予測とは別に,Proposalの始点と長さを表すヒートマップを作成する。最終的に始点終点情報とヒートマップのConfidenceを組み合わせることで,Proposalを出してくる手法を提案。

2019-02-22 16 19 00

手法

ネットワーク全体の概要は以下の通り。

2019-02-22 16 19 00

BM confidence map

ヒートマップは始点を横軸,Proposalの長さを縦軸として予測される。つまり同一の始点から始まる長さの違うProposalについても,ヒートマップを利用することによってConfidenceの算出が容易となる。このようにヒートマップはconfidenceのスコアを測るために用いる。

2019-02-22 16 19 00

実験

ActivityNetを用いて他手法との比較。

2019-02-22 16 21 40

出力例

2019-02-22 16 21 40

新規性

ヒートマップを用いたConfidenceの算出