Index
- Index
- CondInst
- 諸定義
- 従来の手法を instance segmentation に適用する際の課題
- Network Architecture
- Conditional Convolution
- 参考
CondInst
Instance Segmentation における手法の一つ.
- Instance Segmentation #まとめ編
諸定義
従来の手法を instance segmentation に適用する際の課題
入力画像に対して、1 つのマスクを予測するだけの semantic segmentaion と異なり、
instance segmentation は、画像内のインスタンスの数に応じて、可変数のマスクを予測する必要がある.
これは、従来の FCN をインスタンス セグメンテーションに適用する場合に課題となる.
この手法の工夫
K 個のインスタンスがある画像に対して、K 個の異なるマスク ヘッドが動的に生成され、
各マスク ヘッドのフィルターにターゲット インスタンスの特性が含まれるというアイデアが中心となっている.
その結果、マスクが入力に適用されると、インスタンスのピクセルに対してのみ発火し、インスタンスのマスク予測が生成される.
この手法の狙い
Mask R-CNN (ROI-based method)のように bounding box の情報から、領域の情報を得る.
- Mask R-CNN
同様に、CondInst はインスタンスを認識するフィルターを使用してインスタンスを表す.
言い換えると、インスタンスの概念を境界ボックスにエンコードする代わりに、 CondIst はそれをマスク ヘッドのパラメーターに暗黙的にエンコードする.
Network Architecture
FCOS をベースにしている.
Controller Head
Conditional Convolution
- Dynamic Convolution / CondConv
参考
- Conditional convolutions for instance segmentation
- [2020]
- Introduction
- 1.1 Related Work
- Conditional Convolutions
- Instance Segmentation
- Instance Segmentation with CondInst
- 2.1 Overall Architecture
- 2.2 Network Outputs and Training Targets
- Classification Head
- Controller Head
- Center-ness and Box Heads
- arxiv.org
Web サイト
- 論文:Conditional Convolutions for Instance Segmentation