【深層学習】Stream YOLO

• YOLO #まとめ編
  • yhayato1320.hatenablog.com

Index

Steam YOLO

精度と速度のトレードオフの探索をせずに、速度が高いモデルを考える.

いくつかの工夫点を導入.

• Dual Flow Perception / DFP
• Trend Aware Loss / TAL

Dual Flow Perception / DFP

2 つの異なるフレームからの特徴マップを融合する.

Trend Aware Loss / TAL

物体によって移動速度がことなるために、
各物体の位置とクラスの予測に対しする損失に、動的に重みを与える仕組み.

Pipleline

次のフレームの物体の位置を予測するために Stream YOLO では、以下の考えで構成されている.

• Base Detector
• Offline Training Schedule
• Online Inference Strategy

Base Detector

YOLO X

Offline Training Schedule

Online Inference Strategy

参考

• Real-time Object Detection for Streaming Perception
  • [2022]
  • Abstract
  • 3 Methods
    • 3.2 Pipeline
    • 3.3. Dual-Flow Perception Module (DFP)
    • 3.4. Trend-Aware Loss (TAL)
  • arxiv.org