2020-01-01から1年間の記事一覧
2020/08/30 参考 画像のノイズ除去 — OpenCV-Python Tutorials 1 documentation OpenCVを使ったノイズ除去 アルゴリズム Non-local Means Denoising 画像中の小領域(例えば5x5) を設定 画像中の別の場所に同じようなパッチ(小領域)が存在する可能性は高いと…
2020/08/23 参考 最近のポケモンはデジモンっぽいのか、ディープラーニングに聞いてみた モチベーション 画像系 / スコアリング タスク / 表現学習 まわりで同様のタスクをやっていた 重要な項目を抽出して、理解をまとめたい key-word CNN Gard-CAM フィル…
2020/08/24 「edge detection document dataset」 MIDV-500: a dataset for identity document analysis and recognition on mobile devices in video stream paper arxiv dataset 「MIDV-500」についての説明 身分証明書のデータセット スマホで撮影した画…
2020/08/26 モチベーション table のデータセットを使いたかったが、 仕様や種類があったのでまとめたい サイト ICDAR 2013 Table Competition メイン このコンペは「 table detection or location」と「table structure recognition」のふたつのコンペに分…
2020/08/23 URL OpenCVでかすんでる文字をクッキリさせる方法 モチベーション 画像処理を行う前に、画像のノイズを除去しておきたい いくつかの手法を試せるようにしておきたい できれば理論もこの記事を、皮切りに確認したい 手法 ガンマ補正 適応的しきい…
参考 データサイエンティストとして読んで役立った本たち@2020-07 モチベーション データ解析が好きなものとして気になってしまう 書籍のリストだけ作って、あとで確認する用 書籍リスト 数学 解析入門 Ⅰ(基礎数学2) ;杉浦 光夫 線型代数学 ;齋藤正彦 統計学…
Note ロジスティクス回帰では、最尤法を利用してパラメータを推定する 対数尤度関数を最大(最小)にするパラメータを推定する その際どのように最適化するかとなったときに、解析的に最小値を求められないので以下の2つのどちらで最適化する Newton-Raphso…
20200814 「tensorboard directory_watcher updated even though the current file is」 環境 tensorflow 2.0 問題 tensorflow で学習ログが validation はでるが、train はでず、tensorboardに表示されない 「directory_watcher.py file updated even thoug…
2020/08/13 環境 Ubuntu 16.4 docker 19.03.12 cuda 10.2 参考 Docker(19.03)でgpu有効化してpytorchで訓練するまでやる(Ubuntu18.04) DockerでGPUを使う 対応 nvidia-container-runtime-script.shを起動して、nvidia-container-runtime をインストールする…
2020/08/13 参考 TensorBoardスカラー:Kerasでのトレーニング指標のロギング tensorflow 公式 「カスタムスカラーのロギング」を参考 file_writer を作成して、tf.summary.xxx で書き込む # writer を作成 file_writer = tf.summary.create_file_writer(log…
2020/08/12 参考 dockerのエラー。「ERROR: for コンテナ名 Cannot start service コンテナ名: network not found」の対処法 作業中にはまったエラー Exit しているdocker コンテナのプロセスが残っていて、docker network が見つけられない状態 docker rm …
画像処理 #まとめ編 yhayato1320.hatenablog.com Index Index Segmentation とは Segmentation の分類 処理の流れ Sliding Window + Markov Random Fields を用いたアプローチ ニューラルネットワークを用いたアプローチ アルゴリズム 画像処理を利用したア…
まえがき おまけ編 Google Docs -> Markdown 変換 CircleCI無料枠 Google Docs -> Markdown 変換 Docs to Markdown を使用 参考 Googleドキュメントから効率的にMarkdown作成【Docs to Markdown】 CircleCI無料枠 Markdown から PowerPoint に変換する処理に…
まえがき テスト編 一連の流れの確認する GithubでMarkdown 編集して、Google Drive でPowerpoint ファイルを確認する 準備作業 Markdown 管理するために Github レポジトリを作成 (Private推奨) 作成したレポジトリに CircleCI を連携 作成したレポジトリに…
Githubで管理しているMarkdownを自動でGoogleSlidesに変換する#02 まえがき Googleのクレデンシャル編 Markdown をパワーポイントに変換したファイルを Google Drive にアップロードするための認証準備 作業内容 Google Drive の認証OAuth について Google A…
まえがき 前 : Githubで管理しているMarkdownを自動でGoogleSlidesに変換する#00 次 : Githubで管理しているMarkdownを自動でGoogleSlidesに変換する#02 CircleCI編 Githubとの連携 CircleCIの設定ファイル 参考 GitHub+CircleCI入門 はじめに [JavaScript]C…
モチベーション ブログへの記載をGoogleSlidesですることが多い しかし、スライドの記載だと検索にひっかからないのでSEO対策したい スライドを作成する前にGoogleDocsにめもしているので、それをMardown化してGithubで管理するようにしていきたい Markdown …
Index 今回の目的 Azure とは Azure Cognitive Services について Portal 画面 サブスクリプションとは リソースグループ Cognitive Services 今回の目的 文字抽出エンジンとして、Azure Cognitive Services を使用したい インターンの方に調査を行っていた…
モチベーション django で web app を作っているときにトランプゲームアプリを作りたくなった オンラインで対戦できる仕様にしたい server からの送信も必要となり、双方向の通信ができるようにしたい そこで WebSocket を使う、、、 まとめスライド スライ…
YOLO #まとめ編 yhayato1320.hatenablog.com Index Index YOLO v2 とは 改善点 Better Batch Nomalization High Resolution Classifier Convolutional with Anchor Boxes Dimension Clusters Direct Location Prediction Fine-Grained Feature Multi-Scale T…
YOLO #まとめ編 yhayato1320.hatenablog.com Index Index YOLO とは 既存手法との比較 YOLO の利点 処理時間が早い 画像全体を見て予測できる 汎用性が高い Unified Detection ネットワークアーキテクチャ 学習 / Training 正規化 活性化関数 誤差関数 学習…
目的 local上ではなく、CloudRun 上のdocker環境から起動させる CloudRunとは サーバレスのコンテナコンピューティングサービス HTTP通信でイベントをリッスンできる 参考 google 本元のHP 作業手順 Cloud Run で実行する image の準備 Cloud Run でサービス…
目的 Docker環境の作成 Google認証への対応し、Colaboratory を実行する 参考 [完全自動接続]Colaboratoryファイルのみで90分・12時間問題を解決した[Selenium使用] selenium を使用して、Colaboratory ファイルを実行する箇所を参考にさせていただいた Ubun…
目的 手動でColaboratory上のコードを実行させる Colaboratory の制限を回避する 参考 [完全自動接続]Colaboratoryファイルのみで90分・12時間問題を解決した[Selenium使用] 非常に参考になりました、ありがとうございます 課題 Colaroboratory には2の制約…
モチベーション GoogleColaboratory は非常に魅力的 しかし、定期実行機能や外部APIなどは用意されていない(まぁ無料だからね) 2019/12時点 でも、定期実行やプログラムから起動させたい 事前調査 どうやら、外部からの実行を行いたい人はいるようだ Google …
モチベーション google colaboratory環境でseleniumを使用するときにgoogle chrome の user agent を使用したい 16 ではなく 18で【ここ重要】 参考 Dockerを導入してGUI操作可能なLinux(Ubuntu)コンテナを作成する Xquartz, Socat が私の mac の環境ではう…