オムライスの備忘録

数学・統計学・機械学習・プログラミングに関することを記す

【深層学習】Flow #まとめ編

Index

Flow

深層学習を用いた生成モデルの一つ.

応用

Continuous Normalizing Flow / CNF / 2017

  • Continuous-Time Flows for Efficient Inference and Density Estimation

Flow Matching for Generative Modeling

Generative Flow Networks / GFlowNet / 2021

タスク

Fast Flow

参考

  • Flow-based Deep Generative Models

  • 深層生成モデルを巡る旅(1): Flowベース生成モデル

  • [DL輪読会]Flow-based Deep Generative Models

  • FFJORD: Free-form Continuous Dynamics for Scalable Reversible Generative Models

    • [2018]
    • フローベースの生成モデルをReversible Generative Model としている
    • 可逆な生成モデル : Partitioned Transformations / 自己回帰フロー : Autoregressive Transformations / フローによる変分推定 : Normalizing Flows の 3 の種類に分類
    • arxiv.org
  • Normalizing Flows Tutorial, Part 1: Distributions and Determinants

可逆な生成モデル : Partitioned Transformations
  • NICE: Non-linear Independent Components Estimation

  • Density estimation using Real NVP

    • [2016]
    • Real NVP / Real-Valued Non-Volume Preserving について
    • arxiv.org
  • Glow: Generative Flow with Invertible 1x1 Convolutions

  • VideoFlow: A Conditional Flow-Based Model for Stochastic Video Generation

自己回帰フロー : Autoregressive Transformations
  • MADE: Masked Autoencoder for Distribution Estimation

  • Masked Autoregressive Flow for Density Estimation

  • Improving Variational Inference with Inverse Autoregressive Flow

  • Parallel WaveNet: Fast High-Fidelity Speech Synthesis

  • Neural Autoregressive Flows

フローによる変分推定 : Normalizing Flows
  • Variational Inference with Normalizing Flows

    • [2015]
    • Planar Flow
    • Normalizing Flow
    • arxiv.org
  • Sylvester Normalizing Flow