オムライスの備忘録

数学・統計学・機械学習・プログラミングに関することを記す

2022-01-01から1ヶ月間の記事一覧

【深層学習】シャムネットワーク / Siamese Network

yhayato1320.hatenablog.com シャムネットワーク / Siamese Network とは 2 つの画像の入力に対し、同じネットワークを通じて出力された結果を比較する仕組み. 参考 Signature Verification using a "Siamese" Time Delay Neural Network [1994] https://pro…

【画像処理】SIFT 記述子 / SIFT Descriptor

Index Index SIFT 記述子 / SIFT Descriptor とは 処理手順 参考 書籍 SIFT 記述子 / SIFT Descriptor とは 画像処理で利用される記述子 / Descriptorという考えのひとつ. yhayato1320.hatenablog.com その中でも、輝度勾配を利用する手法. 処理手順 SIFT 記…

【画像処理】CNN Descriptor

Index Index CNN Descriptor 代表的な手法 シャムネットワーク / Siamese Network 応用アルゴリズム 参考 CNN Descriptor 画像処理で利用される記述子 / Descriptorという考えのひとつ. yhayato1320.hatenablog.com 訓練データを用いて学習された CNN (畳み…

【画像処理】記述子 / Descriptor

画像処理 #まとめ編 yhayato1320.hatenablog.com Index Index 記述子 / Descriptor とは 様々な記述子 画素記述子 / Raw Pixel Descriptor 局所バイナリパターン / Local Binary Pattern / LBP 局所輝度勾配 バイナリ局所記述子 / Binary Local Descriptor …

【画像処理】分野一覧 #まとめ編

#まとめ編 一覧 yhayato1320.hatenablog.com Index Index 画像処理 / Image Processing 狭義の画像処理 画像認識 / Image Recognition 画像について 画素 / pixel グレースケール画像 カラー画像 表色系 / Color Specification System 色空間 HSI 空間 / HSI…

【幾何学】マハラノビス距離 / Mahalanobis Distance

yhayato1320.hatenablog.com Index Index マハラノビス距離 / Mahalanobis Distance とは アルゴリズムへの応用 参考 Web サイト マハラノビス距離 / Mahalanobis Distance とは 個の特徴量を持つ変数 に関して、 2 つのクラス (群) の観測された学習データ…

【幾何学】距離 #まとめ編

Index Index 距離関数 距離空間 距離の種類 参考 距離関数 を空でない集合とする. に対して、実数 が定まっていて、次の 3 条件を満たしているとき、 2 変数関数 を集合 上の距離関数という. に対して、以下の条件を満たす (距離は必ず 0 以上) (距離が 0 な…

【画像処理】Intersection over Union / IoU #アルゴリズム編

yhayato1320.hatenablog.com Index Index Intersection Over Union / IOU とは 実装編 参考 Intersection Over Union / IOU とは 物体検出の結果を適切に評価するためには、 予測したバウンディングボックス と 真のバウンディングボックス (=Ground Truth) …

【動画像処理】Simple Online and Realtime Tracking / SORT #アルゴリズム編

Index Index Simple Online and Realtime Tracking / SORT とは アルゴリズム Propagating Associating Managing 新しい物体の登録 古い物体の削除 応用アルゴリズム 参考 Web サイト Simple Online and Realtime Tracking / SORT とは 物体追跡 / Object Tr…

【時系列解析】カルマンフィルター / Kalman Filter

状態空間モデル yhayato1320.hatenablog.com Index Index 参考 書籍 参考 A New Approach to Linear Filtering and Prediction Problems [1960] カルマンフィルター / Kalman Filter について http://www.unitedthc.com/DSP/Kalman1960.pdf 書籍 実践 時系列…

【深層学習】YOLO X #実装編 #01

YOLO X #実装編 まとめ yhayato1320.hatenablog.com Index Index YOLO X とは タスク ライブラリと学習済みモデル 環境構築とライブラリ 実装 予測の処理の確認 処理速度の比較 参考 YOLO X とは 深層学習を用いた物体検出アルゴリズム. YOLO X #アルゴリズ…

【深層学習】DeepSORT #アルゴリズム編

Index Index DeepSORT とは Simple Online and Realtime Tracking / SORT とは 改善点 State / 状態 追跡の管理について Assignment / 割り当て マハラノビス距離 / Mahalanobis Distance Appearance Descriptor 関連度の計算 Deep Appearance Descriptor 学…

【深層学習】YOLO v4 #アルゴリズム編 #02

yhayato1320.hatenablog.com Index Index YOLO v4 とは Bag of Specials Convolution の改善 Spatial Pyramid Pooling / SPP Atrous Spatial Pyramid Pooling / ASPP Receptive Field Block / RFB Attention の導入 特徴量の扱い方の改善 低レベルの特徴を高…

【深層学習】YOLO v4 #アルゴリズム編 #01

YOLO #まとめ編 yhayato1320.hatenablog.com Index Index YOLO v4 とは Bag of Freebies 手法 Data Augmentation Drop 系の正則化手法 画像合成・画風変換を利用 クラス間のデータ数の不均衡 One Hot 表現 BB の目的関数 IoU Loss 参考 YOLO v4 とは YOLO v4…

【深層学習】YOLO v4 #アルゴリズム編 #00

YOLO #まとめ編 yhayato1320.hatenablog.com Index Index YOLO v4 とは この論文の注目ポイント Bag of Freebies / Bag of Specials Bag of Freebies Bag of Specials ネットワークアーキテクチャ Backbone Neck Head アーキテクチャまとめ 改善・工夫 Data …

【深層学習】YOLO v3

YOLO #まとめ編 yhayato1320.hatenablog.com Index Index YOLO v3 とは 改善点 Bounding Box Prediction BB の位置の予測 BB の物体確信度スコアの予測 誤差に適用する Anchor マルチラベル対応 複数スケールでの予測 Feature Extractor / Backbone 参考 Web…

【機械学習】二乗和誤差 / 残差平方和

Index Index 二乗和誤差 / 残差平方和 残差平方和 / Residual Sum of Square / RSS 二乗和誤差 / Sum of Squared Error / SSE 平均二乗誤差 / Mean Squared Error / MSE 微分・勾配 参考 Web サイト 二乗和誤差 / 残差平方和 統計学や機械学習で利用される目…

【機械学習】誤差関数 / 損失関数 #まとめ編

Index Index 誤差関数 / 損失関数 二乗和誤差 / 残差平方和 二乗平均平方根誤差 / Root Mean Squared Error / RMSE Entropy / エントロピー Cross Entropy / 交差エントロピー Binary Cross Entropy Categorical Cross Entropy Sparse Categorical Cross Ent…

【深層学習】VGG

yhayato1320.hatenablog.com VGG とは 畳み込み層とプーリング層から構成される基本的な CNN. 特徴としては、重みのある層 (畳み込み層や全結合層) を 全部で 16 (もしは19) 層まで重ねてディープにしている点. 注目するべき点は、 の小さなフィルターによる…

【統計学】中心極限定理

yhayato1320.hatenablog.com Index Index 中心極限定理 とは 参考 中心極限定理 とは 母数分布が何であっても、標本 の和 の確率分布は、 が大きいときには、正規分布と考えてよい. 参考 統計学入門 東京大学出版 8 大数の法則と中心極限定理 8.2 中心極限定…

【統計学】ノンパラメトリックベイズ / ベイズ推定

yhayato1320.hatenablog.com yhayato1320.hatenablog.com Index Index 参考 書籍 Web 参考 書籍 ノンパラメトリックベイズ 点過程と統計的機械学習の数理 ノンパラメトリックベイズ 点過程と統計的機械学習の数理 (機械学習プロフェッショナルシリーズ)作者:…

【統計学】カーネル密度推定 / KDE

yhayato1320.hatenablog.com yhayato1320.hatenablog.com Index Index カーネル密度推定 (Kernel Density Estimation / KDE) とは Edgeworth (エッジワース) 展開 参考 Web サイト カーネル密度推定 (Kernel Density Estimation / KDE) とは データのヒスト…

【統計学】ヒストグラム密度推定 / HDE

yhayato1320.hatenablog.com yhayato1320.hatenablog.com Index Index ヒストグラム密度推定 (Histogram Density Estimation / HDE) とは 参考 Web サイト ヒストグラム密度推定 (Histogram Density Estimation / HDE) とは データのヒストグラムの区間ごと…

【統計学】標本分布

確率 #まとめ編 yhayato1320.hatenablog.com Index Index 標本分布の役割 例 標本分布 標本和 参考 標本分布の役割 標本平均も標本分散も標本の集計値 (=統計量)であり、知りたい母集団のいろいろな 諸量、諸性質を反映し、それを知る手がかりを与えている. …

【深層学習】Diffusion Model #まとめ編 #00

生成モデル yhayato1320.hatenablog.com Index Index 基本アルゴリズム スコアベースモデル / SBM Diffusion Probabilistic Model / DPM / 2015 Denoising Diffusion Probabilistic Model / DDPM / 2020 応用アルゴリズム Latent Diffusion Model / LDM / 20…

【深層学習】生成モデル / Generative Model #まとめ編

Index Index 生成モデル Generative Adversarial Network / GAN Variational Auto Encoder / VAE Flow Base Model Diffusion Model Growing NCA Consistency Model アルゴリズム Riemannian Flow Matching / RFM / 2023 Reduce, Reuse, Recycle / 2023 様々…

【深層学習】Stochastic Gradient Langevin Dynamics / SGLD

最適化 #まとめ編 yhayato1320.hatenablog.com Index Index Langevin Dynamics Stochastic Gradient Langevin Dynamics 参考 Web サイト Langevin Dynamics Stochastic Gradient Langevin Dynamics 参考 Bayesian Learning via Stochastic Gradient Langevin…

【統計学】正規分布 / ガウス分布

Index Index 正規分布 / ガウス分布 ガウスとの関連 基本情報 密度関数 期待値と分散 期待値 分散 特徴・性質 標準正規分布 中心極限定理 識別関数 条件付きガウス分布 周辺ガウス分布 ベイズの定理 最尤推定 参考 正規分布 / ガウス分布 代表的な連続型の確…

【機械学習】標準化 / Standardization

yhayato1320.hatenablog.com Index Index 代表値としての標準化 確率変数の標準化 機械学習における標準化 参考 代表値としての標準化 手元のデータ (の分布) を表現するために、様々な代表値が利用されるが、その中のひとつとして利用される. yhayato1320.h…

【機械学習】平均ベクトルと共分散行列

機械学習 #まとめ編 yhayato1320.hatenablog.com Index Index 統計量について 平均ベクトル 共分散行列 参考 統計量について 複数の説明変数・特徴量を用いて識別や解析を行う際に、測定単位や数値の範囲を、 特徴量の大きさが同程度になるように揃えた方が…