オムライスの備忘録

数学・統計学・機械学習・プログラミングに関することを記す

2020-08-01から1ヶ月間の記事一覧

opencv ノイズ除去

2020/08/30 参考 画像のノイズ除去 — OpenCV-Python Tutorials 1 documentation OpenCVを使ったノイズ除去 アルゴリズム Non-local Means Denoising 画像中の小領域(例えば5x5) を設定 画像中の別の場所に同じようなパッチ(小領域)が存在する可能性は高いと…

「最近のポケモンはデジモンっぽいのか、ディープラーニングに聞いてみた」をよんで

2020/08/23 参考 最近のポケモンはデジモンっぽいのか、ディープラーニングに聞いてみた モチベーション 画像系 / スコアリング タスク / 表現学習 まわりで同様のタスクをやっていた 重要な項目を抽出して、理解をまとめたい key-word CNN Gard-CAM フィル…

Edge Detection の学習(U-Net)にopen data を使用したい

2020/08/24 「edge detection document dataset」 MIDV-500: a dataset for identity document analysis and recognition on mobile devices in video stream paper arxiv dataset 「MIDV-500」についての説明 身分証明書のデータセット スマホで撮影した画…

ICDAR 2013 Table Competition

2020/08/26 モチベーション table のデータセットを使いたかったが、 仕様や種類があったのでまとめたい サイト ICDAR 2013 Table Competition メイン このコンペは「 table detection or location」と「table structure recognition」のふたつのコンペに分…

「OpenCVでかすんでる文字をクッキリさせる方法」をよんで

2020/08/23 URL OpenCVでかすんでる文字をクッキリさせる方法 モチベーション 画像処理を行う前に、画像のノイズを除去しておきたい いくつかの手法を試せるようにしておきたい できれば理論もこの記事を、皮切りに確認したい 手法 ガンマ補正 適応的しきい…

「データサイエンティストとして読んで役立った本たち@2020-07」を読んで

参考 データサイエンティストとして読んで役立った本たち@2020-07 モチベーション データ解析が好きなものとして気になってしまう 書籍のリストだけ作って、あとで確認する用 書籍リスト 数学 解析入門 Ⅰ(基礎数学2) ;杉浦 光夫 線型代数学 ;齋藤正彦 統計学…

ロジスティック回帰 におけるNewton-Raphson 法 と Fisher Scoring 法

Note ロジスティクス回帰では、最尤法を利用してパラメータを推定する 対数尤度関数を最大(最小)にするパラメータを推定する その際どのように最適化するかとなったときに、解析的に最小値を求められないので以下の2つのどちらで最適化する Newton-Raphso…

tensorboard error 「directory_watcher.py file updated even though the current file is file」

20200814 「tensorboard directory_watcher updated even though the current file is」 環境 tensorflow 2.0 問題 tensorflow で学習ログが validation はでるが、train はでず、tensorboardに表示されない 「directory_watcher.py file updated even thoug…

「could not select device driver "" with capabilities: [[gpu]].」エラー

2020/08/13 環境 Ubuntu 16.4 docker 19.03.12 cuda 10.2 参考 Docker(19.03)でgpu有効化してpytorchで訓練するまでやる(Ubuntu18.04) DockerでGPUを使う 対応 nvidia-container-runtime-script.shを起動して、nvidia-container-runtime をインストールする…

tensorflow v.2.x で tensorboard in keras

2020/08/13 参考 TensorBoardスカラー:Kerasでのトレーニング指標のロギング tensorflow 公式 「カスタムスカラーのロギング」を参考 file_writer を作成して、tf.summary.xxx で書き込む # writer を作成 file_writer = tf.summary.create_file_writer(log…

Docker 環境で tensorboard 起動して外部IP からアクセスしたい

2020/08/12 参考 dockerのエラー。「ERROR: for コンテナ名 Cannot start service コンテナ名: network not found」の対処法 作業中にはまったエラー Exit しているdocker コンテナのプロセスが残っていて、docker network が見つけられない状態 docker rm …

【画像処理】セグメンテーション / Segmentation #まとめ編 #00

画像処理 #まとめ編 yhayato1320.hatenablog.com Index Index Segmentation とは Segmentation の分類 処理の流れ Sliding Window + Markov Random Fields を用いたアプローチ ニューラルネットワークを用いたアプローチ アルゴリズム 画像処理を利用したア…

【ライフハック】Githubで管理しているMarkdownを自動でGoogleSlidesに変換する#04

まえがき おまけ編 Google Docs -> Markdown 変換 CircleCI無料枠 Google Docs -> Markdown 変換 Docs to Markdown を使用 参考 Googleドキュメントから効率的にMarkdown作成【Docs to Markdown】 CircleCI無料枠 Markdown から PowerPoint に変換する処理に…

【ライフハック】Githubで管理しているMarkdownを自動でGoogleSlidesに変換する#03

まえがき テスト編 一連の流れの確認する GithubでMarkdown 編集して、Google Drive でPowerpoint ファイルを確認する 準備作業 Markdown 管理するために Github レポジトリを作成 (Private推奨) 作成したレポジトリに CircleCI を連携 作成したレポジトリに…

【ライフハック】Githubで管理しているMarkdownを自動でGoogleSlidesに変換する#02

Githubで管理しているMarkdownを自動でGoogleSlidesに変換する#02 まえがき Googleのクレデンシャル編 Markdown をパワーポイントに変換したファイルを Google Drive にアップロードするための認証準備 作業内容 Google Drive の認証OAuth について Google A…

【ライフハック】Githubで管理しているMarkdownを自動でGoogleSlidesに変換する#01

まえがき 前 : Githubで管理しているMarkdownを自動でGoogleSlidesに変換する#00 次 : Githubで管理しているMarkdownを自動でGoogleSlidesに変換する#02 CircleCI編 Githubとの連携 CircleCIの設定ファイル 参考 GitHub+CircleCI入門 はじめに [JavaScript]C…

【ライフハック】Githubで管理しているMarkdownを自動でGoogleSlidesに変換する#00

モチベーション ブログへの記載をGoogleSlidesですることが多い しかし、スライドの記載だと検索にひっかからないのでSEO対策したい スライドを作成する前にGoogleDocsにめもしているので、それをMardown化してGithubで管理するようにしていきたい Markdown …