yiskw713 / paper_summary

Write summaries of papers I've read in Japanese
10 stars 1 forks source link

Weakly-Supervised Action Segmentation with Iterative Soft Boundary Assignment #112

Open yiskw713 opened 4 years ago

yiskw713 commented 4 years ago

INFO

author

Li Ding, Chenliang Xu

affiliation

conference or year

CVPR2018

link

pdf keras実装

概要

Screen Shot 2020-01-11 at 9 44 18

Action Segmentation を行うネットワークであるTCN(#63)に Feature Pyramid 構造を組み込んだ Temporal Convolutional Feature Pyramid Network (TCFPN)を提案している. また,動画中の行動の順序(action transcript)だけを教師ラベルとして,フレームレベルの行動認識を行う弱教師あり学習の枠組みとして,Iterative Soft Boundary Assignment (ISBA)を提案している. 既存研究で用いられていたRNNや隠れマルコフモデルなどに比べて,TCFPNは学習コストやデータコストが低く,精度も高いことを確認. またISBAによって,弱教師あり学習が実現されていることも確認.

提案手法

Screen Shot 2020-01-11 at 9 44 31

TCFPNの概要.構造は至ってシンプル.

Screen Shot 2020-01-11 at 9 44 51

action transcriptからフレームレベルの擬似正解ラベルを生成する方法.

Screen Shot 2020-01-11 at 9 45 02

検証

新規性

議論,展望

Comment

date

Jan. 11, 2020