オムライスの備忘録

数学・統計学・機械学習・プログラミングに関することを記す

データサイエンス-機械学習

【機械学習】半教師あり学習 / Semi Supervised Learning

Index Index 半教師あり学習 / Semi Supervised Learning 参考 半教師あり学習 / Semi Supervised Learning 教師あり学習のひとつ. 教師あり学習 yhayato1320.hatenablog.com 少量のラベルありデータと大量のラベルなしデータを利用して学習する手法. 参考 …

【画像処理】データ拡張 / Data Augmentation #まとめ編

Index Index データ拡張 / Data Augmentation 画像における Data Augmentation Data Augmentation の手法 画像処理による Data Augmentation 深層学習を用いた Data Augmentation 参考 データ拡張 / Data Augmentation データ拡張 / Data Augmentation とは…

【金融時系列解析】Decision Tree #実装編

Index Index Decision Tree タスク データセット 設定 ハイパラーパラメータのチューニング 実装 Training Decision Tree Machine Learning におけるアルゴリズムのひとつ. Decision Tree #まとめ編 yhayato1320.hatenablog.com タスク バックテスト 金融時…

【機械学習】Gradient Boosting #実装編

Index Index Gradient Boosting タスク データセット 実装 参考 Gradient Boosting Gradient Boosting #アルゴリズム編 yhayato1320.hatenablog.com タスク 時系列予測. 時系列解析 #まとめ編 yhayato1320.hatenablog.com 時系列予測 #実装編 yhayato1320.ha…

【機械学習】ハイパーパラメータチューニング / Hyper Parameter Turning

Index Index ハイパーパラメータチューニング / Hyper Parameter Turning ランダムサーチ / Random Search グリットサーチ / Grid Search CMA-ES Tree-structured Parzen Estimator / TPE ベイズ最適化 参考 ハイパーパラメータチューニング / Hyper Paramet…

【機械学習】決定木 / Decision Tree #実装編 #01

Index Index 決定木 / Decision Tree タスク データセット ハイパーパラメータのチューニング 実装 参考 決定木 / Decision Tree 予測のアルゴリズムに、決定木を利用. 決定木 / Decision Tree #まとめ編 yhayato1320.hatenablog.com タスク 時系列予測. 時…

【機械学習】前処理 #まとめ編 #02

Index Index 前処理 特徴量の生成 特徴量の選択 整形 NC / NTC 参考 前処理 機械学習で利用されるデータの前処理において、時系列解析に利用される事項について記す. 前処理 #まとめ編 機械学習における一般的な手法 yhayato1320.hatenablog.com 時系列解析 …

【機械学習】前処理 #まとめ編 #01

Index Index 前処理 平均ベクトルと共分散行列 標準化 / Standardization 無相関化 白色化 / Whitening 時系列解析 参考 前処理 機械学習で利用されるデータの前処理について記す. 機械学習 分野一覧 #まとめ編 yhayato1320.hatenablog.com 平均ベクトルと共…

【機械学習】Gradient Boosting #アルゴリズム編

Index Index Gradient Boosting 目的 勾配 更新 実装 参考 書籍 Web サイト Gradient Boosting Boosting の手法の一つ. Boosting yhayato1320.hatenablog.com 目的 : データ数 : 入力データ 損失関数 を最小にする 予測関数 を見つけたい. 勾配 各識別器の損…

【機械学習】ブートストラップ法 / Bootstrap Method

Index Index ブートストラップ法 / Bootstrap Method 参考 ブートストラップ法 / Bootstrap Method 機械学習におけるデータ分割の方法のひとつ. データ分割 yhayato1320.hatenablog.com 再代入誤り率のバイアスを補正するために利用される. データ集合 とし…

【機械学習】データ分割 #まとめ編

機械学習 分野一覧 #まとめ編 yhayato1320.hatenablog.com Index Index 汎化能力 データ分割 分割方法 ホールドアウト法 / Holdout Method 交差確認法 / 交差検証法 / Cross Validation Method 一つ抜き法 / Leave One Out Method ブートストラップ法 / Boot…

【機械学習】Lifted Structure Loss

Index Index Lifted Structure Loss Loss Function Architecture 課題 対応策・工夫 参考 Lifted Structure Loss Metric Learning / Distance Learning の損失として利用される. Metric Learning / Distance Learning #まとめ編 #01 損失について yhayato132…

【機械学習】条件付き確率場 / Conditional Random Field / CRF

Index Index 条件付き確率場 / Conditional Random Field / CRF 条件付き確率場 / Conditional Random Field / CRF 機械学習 #まとめ編 yhayato1320.hatenablog.com

【自然言語処理】アルゴリズム #まとめ編 #01

Index Index 自然言語処理におけるアルゴリズム ベイズ識別 / Naive Bayes Classifier 隠れマルコフモデル / Hidden Markov Model / HMM 条件付き確率場 / Conditional Random Field / CRF DeepLearning 参考 自然言語処理におけるアルゴリズム 機械学習を用…

【機械学習】SNR Contrastive Loss

Index Index Signal To Noise Ration Contrastive Loss Regularization 参考 Signal To Noise Ration Contrastive Loss Metric Learning / Distance Learning の損失に利用される. Metric Learning / Distance Learning #まとめ編 #01 損失 / Loss について …

【機械学習】Soft Triplet Loss

Index Index Soft Triplet Loss Regularization 参考 Soft Triplet Loss Metric Learning / Distance Learning の損失に利用される. Metric Learning / Distance Learning #まとめ編 #01 損失 / Loss について yhayato1320.hatenablog.com 従来の Softmax Lo…

【機械学習】正則化 / Regularization #まとめ編

Index Index 正則化 / Regularization 深層学習 / DeepLearning Dropout Metric Learning / Distance Learning 正則化 / Regularization 機械学習におてい、データに過剰なフィッティングが行われることを防ぐ手法. 機械学習 #まとめ編 -yhayato1320.hatenab…

【機械学習】Metric Learning / Distance Learning #まとめ編 #02

Index Index Metric Learning / Distance Learning Regularization / 正則化 L2 Norm / Lp Norm Regular Face / 2019 Sparse Centers Regularization / 2019 Zero Mean Regularization / 2019 Direction Regularization / 2020 参考 Metric Learning / Dista…

【機械学習】Centroid Triplet Loss

Index Index Centroid Triplet Loss 応用 参考 Centroid Triplet Loss Metric Learning / Distance Learning の損失に利用される. Metric Learning / Distance Learning #まとめ編 #01 損失 / Loss について yhayato1320.hatenablog.com 応用 Person Re-Iden…

【機械学習】Contrastive Loss

Index Index Contrastive Loss 課題 正のペアの過剰な最適化 参考 Contrastive Loss Metric Learning / Distance Learning の損失として利用される. Metric Learning / Distance Learning #まとめ編 #01 損失について yhayato1320.hatenablog.com 「異なる」…

【統計学】カーネル

Index Index カーネル ベイズ統計学 パターン認識 / 機械学習 ノンパラメトリック統計 参考 カーネル ベイズ統計学 パターン認識 / 機械学習 ノンパラメトリック統計 参考 カーネル (統計学) ja.wikipedia.org

【統計学】ベイズ回帰

Index Index ベイズ回帰 回帰分析からの導入 パラメータ空間 目的変数の分布 / 予測分布 / 条件付き確率分布 パラメータの分布 / 事前分布 パラメータの分布 / 事後分布 ベイズ回帰 事後分布の更新・推定 / 逐次ベイズ学習 逐次ベイズ学習 ガウス過程回帰 参…

【統計学】ベイズ統計学 #まとめ編

Index Index 統計学・確率論 ベイズの定理 ベイズ確率 機械学習 ベイズ識別 変分ベイズ法 参考 統計学・確率論 確率 #まとめ編 yhayato1320.hatenablog.com ベイズの定理 ベイズ統計学は、基本的にベイズの定理を前提にしている. ベイズの定理 yhayato1320.h…

【画像処理】平均適合率 / Average Precision / AP #実装編

Index Index 平均適合率 / Average Precision / AP Script 参考 平均適合率 / Average Precision / AP 平均適合率 / Average Precision / AP #アルゴリズム編 yhayato1320.hatenablog.com Script github.com AP / mAP の算出プログラム 参考 物体検出の評価…

【機械学習】KL Divergence

Index Index KL Divergence 定義 参考 KL Divergence 相対エントロピー / Relative Entropy や Kallback Leibler (カルバック・ライブラー) Divergence / KL Divergence と呼ばれている. 分布間の類似度を測定する際に利用される. 類似度 #まとめ編 yhayato1…

【機械学習】類似度 #まとめ編

Index Index 類似度 距離 測定方法 データ点・観測点の類似度 コサイン類似度 分布の類似度 KL Divergence 類似度 機械学習において、データ間の類似度を測定する場面が存在する. 機械学習 #まとめ編 yhayato1320.hatenablog.com ここでは、いくつかの計算方…

【機械学習】変分推論法 / Variational Inference・変分ベイズ法 / Variational Bayes

Index Index 変分推論法 / 変分ベイズ法 目的 近似 参考 書籍 Web サイト 変分推論法 / 変分ベイズ法 変数推定 (法) / Variational Inference・変分ベイズ (法) / Variational Bayes 機械学習 #まとめ編 yhayato1320.hatenablog.com 確立分布を近似的に求め…

【機械学習】Multi-Class N-Pair Loss

Index Index Multi-Class N-Pair Loss 応用 参考 Multi-Class N-Pair Loss Metric Learning の手法の一つ. Metric Learning yhayato1320.hatenablog.com 応用 CLIP にて利用されている. CLIP yhayato1320.hatenablog.com 参考 Improved Deep Metric Learning…

【機械学習】Triplet Architecture / Triplet Network

Index Index Triplet Architecture / Triplet Network 応用 参考 Triplet Architecture / Triplet Network Metric Learning の手法の一つ. Metric Learning yhayato1320.hatenablog.com 応用 顔認証への応用. FaceNet: A Unified Embedding for Face Recogni…

【機械学習】決定木 / Decision Tree #まとめ編

機械学習 #まとめ編 yhayato1320.hatenablog.com Index Index 決定木 / Decision Tree 基本アルゴリズム / Classification Regression Tree 応用アルゴリズム ランダムフォレスト / Random Forests Light GBM 実装編 参考 決定木 / Decision Tree 基本アルゴ…