【自然言語処理】文章生成 #まとめ編

Index

文章生成

• 自然現処理 #まとめ編
  • yhayato1320.hatenablog.com

アルゴリズム

seq2seq / 2014

• seq2seq
  • yhayato1320.hatenablog.com

Diffusion-LM / 2022

• Diffusion-LM
  • yhayato1320.hatenablog.com

データセット

• Maluuba NewsQA
  • yhayato1320.hatenablog.com

コードの生成

CodeRL / 2022

• CodeRL: Mastering Code Generation through Pretrained Models and Deep Reinforcement Learning
  • [2022]
  • arxiv.org

LEVER / 2023

• LEVER: Learning to Verify Language-to-Code Generation with Execution
  • [2023]
  • arxiv.org

Planning-Guided Transformer Decoding / PG-TD / 2023

• Planning with Large Language Models for Code Generation
  • [2023]
  • arxiv.org
  • codeaimcts.github.io
  • github.com

評価方法

Code BERT Score / 2023

• CodeBERTScore: Evaluating Code Generation with Pretrained Models of Code
  • [2023]
  • arxiv.org

参考

• ゼロから作るDeep Learning 2

  • ゼロから作るDeep Learning ❷ ―自然言語処理編

    
    
    

• 生成 Deep Learning

  • 生成 Deep Learning ―絵を描き、物語や音楽を作り、ゲームをプレイする