オムライスの備忘録

数学・統計学・機械学習・プログラミングに関することを記す

2021-12-24から1日間の記事一覧

【深層学習】確率的勾配降下法 / Stochastic Gradient Descent; SGD

yhayato1320.hatenablog.com Index Index 勾配法の課題 確率的勾配降下法 / Stochastic Gradient Descent; SGD 更新アルゴリズム 参考 Web サイト 勾配法の課題 関数には、最小値と極小値がある. 誤差関数が下に凸な関数である簡単な状況では、任意の極小値…