【マルチモーダル】Phrase Grounding

Index

Phrase Grounding

文章中のフレーズ・単語が、画像中のどの領域に対応するかを推定するマルチモーダルのタスク.

• マルチモーダル #まとめ編
  • Vision-Language
  • yhayato1320.hatenablog.com

アルゴリズム

ViLD / 2021

• ViLD
  • yhayato1320.hatenablog.com

MDETR / 2021

• MDERT
  • yhayato1320.hatenablog.com

GLIP / 2021

• GLIP
  • yhayato1320.hatenablog.com

GLIP v2 / 2022

• GLIP v2
  • yhayato1320.hatenablog.com

Grounding DINO / 2023

• Grounding DINO
  • yhayato1320.hatenablog.com

参考

• A Joint Study of Phrase Grounding and Task Performance in Vision and Language Models

  • [2023]
  • arxiv.org
    
    

• paperswithcode.com

  • paper with code のタスクのページ