Efficient Two-Stage Detection of Human–Object Interactionswith a Novel Unary–Pairwise Transformer

• DETRの出力特徴量にHOI分類用のtransformer層を追加した2段階モデルを提案
• 最新の手法を凌駕し、学習時間とメモリ消費量を大幅に削減

Aug 9, 2022 HOI CVPR (2022)

HOTR: End-to-End Human-Object Interaction Detection with Transformers

• transformerを初めてHuman-Object Interactionに利用した手法HOTRを提案
• オブジェクト検出とHOI検出の二段階の処理や、重複の削除などの後処理などが必要ない
• Self-Attentionにより文脈的関係を理解している
• V-COCOとHICO-DETデータセットにおいて最先端の性能かつ大幅に高速化

Aug 8, 2022 HOI CVPR (2021)

End-to-End Object Detection with Transformers

• Transformerと二部マッチングロスに基づく物体検出モデルDETRを提案
• すべての物体を一度に予測し、End-to-endで学習される
• COCOでチューニングされたFaster R-CNNと同等の性能で、大きい物体に強い

Aug 1, 2022 Object Detection ECCV (2020)

iCAN: Instance-Centric Attention Network for Human-Object Interaction Detection

• 検出された人や物体のインスタンスごとに、タスクに関連する領域を強調するattentionマップを動的に生成する、HOI検出用ネットワークiCANを提案
• V-COCOで10%、HICO-DETで49%の性能向上

Jul 24, 2022 HOI BMVC (2018)

Detecting and Recognizing Human-Object Interactions

• 人物を中心としたHuman-Object InteractionモデルInteractNetを提案
• 人物の領域から対象物体の位置推定を行うことで物体の探索空間を狭めた
• V-COCOとHICO-DETデータセットにおいて性能向上、1画像あたり135msで実行可能

Jul 22, 2022 HOI CVPR (2018)

Learning to Detect Human-Object Interactions

• HOI検出 (Human-Object Interaction detection) 用の大規模データセットHICO-DETを提供
• HICO-DET用のモデルHuman-Object Region-based Convolutional Neural Networks (HO-RCNN)を提案
• HO-RCNNでは人間と物の空間的関係を利用することで、ベースラインよりも性能を大幅に向上

Jul 15, 2022 HOI WACV (2018)

HICO: A Benchmark for Recognizing Human-Object Interactions in Images

• HOI (Human-Object Interaction) 分類用の大規模データセットHICOを紹介
• HICOを用いて、DNNを含む代表的な行動認識手法を比較
• 手法を詳細に分析して、課題と研究方向を明らかにした

Jul 14, 2022 HOI ICCV (2015)

Human-Object Interaction Detection: A Quick Survey and Examination of Methods

• Human-Object Interaction Detection(HOI)分野についてサーベイ
• HOI分野の基礎研究であるHORCNNアーキテクチャを検証
• HOI分野のベースラインとして一般的に使用されているHICO-DETデータセットを分析

Jul 13, 2022 HOI ACM Multimedia (2020)