オムライスの備忘録

数学・統計学・機械学習・プログラミングに関することを記す

2021-05-23から1日間の記事一覧

【深層学習】Attention #まとめ編

深層学習で使用される手法の1つである「Attention」について、書いた記事をまとめた. #まとめ編 一覧 yhayato1320.hatenablog.com Index Index Attention とは データ分野 画像データへの応用 時系列データへの応用 用語定義 スコア関数 / Score Function A…

【深層学習】seq2seq / Encoder-Decoder Model #アルゴリズム編 #03

この記事の読者 深層学習・ディープラーニングのタスクの1つである「文章生成」について その1つのアルゴリズムとである「seq2seq / Encoder-Decoder Model」の改善手法「Attention」について知りたい. Index Index Attention とは メリット seq2seq の問…