【画像処理】セグメンテーション / Segmentation #まとめ編 #00

• 画像処理 #まとめ編
  • yhayato1320.hatenablog.com

Index

Segmentation とは

画像処理のタスクの一つである領域検知.

画像を入力としてピクセルレベルで領域を分割しラベルを付けていくタスク.

Segmentation の分類

以下のように3つに分類することができる.

• Semantic Segmentation : 画像上の全ピクセルをクラスに分類する
• Instance Segmentation : 物体ごとの領域を分割しかつ物体の種類を認識する
• Panoptic Segmentation : それらを組み合わせる

処理の流れ

Sliding Window + Markov Random Fields を用いたアプローチ

Sliding Window を用いて、局所領域を取得する.

• スライディングウィンドウ法 / Sliding Window Method
  • yhayato1320.hatenablog.com
    
    

また、Markov Random Fields を用いて、後処理でピクセル間の予測クラスを補完する.

ニューラルネットワークを用いたアプローチ

アルゴリズム

画像処理を利用したアルゴリズム

動的輪郭モデル等.

• 画像処理を利用したアルゴリズム
  • yhayato1320.hatenablog.com

(画像処理 +) 機械学習を利用したアルゴリズム

深層学習を利用したアルゴリズム

• 深層学習を利用したアルゴリズム
  • yhayato1320.hatenablog.com

評価指標

mIoU (mean intersection over union) が使用される.

ライブラリ

PP Seg

• PP-MobileSeg: Explore the Fast and Accurate Semantic Segmentation Model on Mobile Devices
  • [2023]
  • arxiv.org
  • github.com

参考

• A Survey of Semantic Segmentation
  • [2016]
  • 評価方法 / データセット / アルゴリズム をまとめる
  • Abstract
  • 1 INTRODUCTION
  • 2 TAXONOMY OF SEGMENTATION ALGORITHMS
  • arxiv.org
    
    

論文メモ
Section 2 : segmentation アルゴリズムの分類
Section 3 : 精度評価とデータセット
(Section 4 : Segmentation の流れ)
Section 5 : 従来のアルゴリズム
Section 6 : NN を利用したアルゴリズム
Section 7 : 将来的な課題

書籍

• 画像認識
  • 9 さらなる話題
    • 9.1 セマンティックセグメンテーション

  • 画像認識 (機械学習プロフェッショナルシリーズ)

Web サイト

• Semantic segmentation
  • 2017
  • Segmentation の大まかな流れ / データセット / 従来手法から深層学習の手法へ / 精度指標
  • 「A Survey of Semantic Segmentation」 を参考
  • Semantic segmentation from Takuya Minagawa
    www.slideshare.net