オムライスの備忘録

数学・統計学・機械学習・プログラミングに関することを記す

【深層学習】Image GPT / iGPT #実装編

Index

Image GPT

GPT のアルゴリズムを Image へ適用させた.

ソースコード

  • openai / image-gpt

  • teddykoker / image-gpt

    • pre training 可能
    • pytorch
    • こちらを使用
    • Pre Training は Auto Regressive のみ、(BERT Style は、予測時のみ?)
    • github.com

実装

実行環境

  • Colabratory (2022/10)
  • python

実行

参考

pre training

sampling

参考