knaka Tech-Blog

AI, IoT, DIYエレクトロニクス, データサイエンスについて投稿予定です。

機械学習

TensorFlow.js + node/express , HTTP経由でモデル読込み、予測結果の出力

index: 概要: 環境 参考のコード 実装など 参考のページ 概要: 前のTensorFlow.js 関係で、 node側で学習したモデルを、HTTP経由で読み込み ブラウザ側で、評価する例となります。 前回と異なり。node側で評価しない構成です 環境 TensorFlow.js node.js Vue…

TensorFlow.js + node/express , モデルの評価結果を出力

index: 概要: 環境 画面 参考のコード 実装など まとめ 参考のページ 概要: 前のTensorFlow.js 関係で、 学習済で保存モデルから、node.js で予測値を出力し。 グラフ表示する例となります 環境 TensorFlow.js node.js Vue.js express Ubuntu16 画面 前回の…

TensorFlow.js で、モデルを保存する。ブラウザ版 #javascript #機械学習 #tensorflow

index: 概要: 環境 参考 保存の処理 例です node.js版 参考のページ 概要: 前のTensorFlow.js 関係で、 学習済のモデルを、保存する例となります。 環境 TensorFlow.js ブラウザ 参考 https://www.tensorflow.org/js/guide/save_load 保存の処理 Local Stora…

TensorFlow.js で、回帰モデルの予測問題サンプル

index: 概要: 環境 参考 参考のコード 実装など 学習データと、評価のグラフ 参考のページ まとめ 概要: 前のTensorFlow.js 関係で、 回帰モデル例を、参考にして。 予測問題の実装メモとなります。評価グラフは、chart.js で。表示する構成です 環境 Tensor…

TensorFlow.js の導入編、回帰モデルなど

概要: TensorFlow.js の導入、セットアップ等になります javascriptで、機械学習できそうですので。試してみました 環境 TensorFlow.js node.js npm 参考 https://www.tensorflow.org/js/tutorialshttps://www.tensorflow.org/js/tutorials/setuphttps://js.…

機械学習の予測結果をsqlite3に保存して、chart.jsでグラフ表示する。

index: 概要: 環境 参考のコード 画面 実装など 参考のページ 概要: 前のVue.js + express 関連になりますが、 機械学習の予測結果を sqlite3に保存する例となります流れとしては、下記となります ・測定データCSVを学習処理 ・予測の出力を、CSV保存 ・予測…

機械学習の予測結果をmongoDBに保存して、chart.jsでグラフ表示する。

index: 概要: 環境 画面 参考のコード 学習処理 参考のページ 概要: 前のVue.js + express 関連になりますが、 機械学習の予測結果をmongoDBに登録し chart.js でグラフ描画の追加となります。・入力データは、前のVue.jsの測定値を 学習させて、予測値を出…

Vue.js(Vue-CLI 3) + flask, 機械学習の評価結果を出力する SPA開発(16) #Vue.js #web #SPA #flask #機械学習 #MachineLerning

index: 概要: 環境 参考のコード 準備 実装など Vueコンポーネント 関連のページ 概要: 前のSPA (Vue.js/ Vuec CLI 3)関連で、flask + 機械学習で クロスドメインの機械学習API サービスと接続し 評価結果を出力する機能と、なります。・機械学習は、予測問…

flask+ TF-IDF+ janome ,AIチャットボット CSVから学習用の文章を読み込む。 自然言語処理(9)

index: 概要 環境 web画面 コード データセット 関連 概要 前の、自然言語処理の関連となります。 TF-IDF の AIチャットボットの、学習データを CSVファイルから、読み込み可能な方法の、例となります。・UI面は、BotUI のJSライブラリを使用しています。 ・…

sklearnで、 決定木 ( DecisionTreeClassifier ) 分類問題

index: 概要 環境 コード データセット 処理 概要 機械学習で、決定木 を使用した。分類問題をテストしてみたいと 思います定義としては、 ある目的(毒キノコかそうでないか、ある商品を購買するかどうかなど)に到達するために、 データの各属性の条件分岐…

sklearnで、 SVM (サポートベクターマシン) 分類問題

index: 概要 環境 コード データセット 処理 結果 概要 機械学習で、SVM を使用した。分類問題をテストしてみたいと 思いますSVM 定義としては、下記のようでした 訓練データにおいて、他クラスの中で最も近い位置にあるサポートベクタを基準として、 距離(…

sklearnで、 k-NN(K-Nearest Neighbor Algorithm) 分類問題

index: 概要 環境 参考 コード データセット 処理 結果 概要 機械学習で、k-NN を使用した。分類問題をテストしてみたいと 思います 環境 python 3.5.2 sklearn 参考 https://qiita.com/fujin/items/128ed7188f7e7df74f2c コード python3 です。 github.com …

入力文章から、俳句 短歌を抽出する。WEB画面の追加 自然言語処理(8)

index: 概要 環境 コード データセット 処理など 関連のページ 概要 前の、 自然言語処理 で TF-IDF 関係となりますが、 俳句、短歌を機械学習させて、入力文章と、 類似文章を抽出する。web画面の作成となります。・ 画面は、前回と同じ Bot UIライブラリを…

TF-IDFで sklearn.feature_extraction.text.TfidfVectorizer の結果を保存する。 自然言語処理(7)

index: 概要 環境 コード 関連のページ 概要 前の、 自然言語処理関係となりますが、 TF-IDFで、学習済みの TfidfVectorizer を保存して、 評価時に、読込むテストしてみました。 環境 python 3.5.2 janome sklearn コード github.compython3 です。train.py…

flask+ TF-IDF で、AIチャットボットをweb画面で作成する。自然言語処理(6)

index: 概要 環境 参考 コード web画面 処理など 参考のページ 概要 以前の、slackチャット対応のAI チャットボット機能の 関連となります。web画面 UIを自作して、 自然言語処理とwebサービスを使用する例となります。UI面は、BotUI のJSライブラリを使用し…

keras YOLO3 で、物体検知

index: 概要 環境 関連 準備 手順 検出の結果 その他 参考の設定 概要 以前の、keras 画像認識に関連した内容で、 YOLO3 物体検知 する例となります。 環境 python : 3.5.2 keras YOLO3 関連 https://qiita.com/yoyoyo_/items/10d550b03b4b9c175d9chttps://q…

keras LSTM で、文章自動生成を行う。 自然言語処理(5)

index: 概要 環境 参考 コード データセット 処理など 評価の結果 概要 前回の、自然言語処理の関連となります。 学習させた文章(書籍など)、を元にLSTM で、文章を自動生成する仕組みの例です。テストは、google colab で行いました。 環境 python 3.5.2 ja…

Slackチャットから、flask+ TF-IDF の応答を出力する。自然言語処理(4)

index: 概要 環境 参考 コード 処理など デモの画面 まとめ 関連のページ 概要 前回の、自然言語処理の関連となります。 slackチャットからの、入力文章を webhook経由で AI/機械学習サーバからの応答を出力する例となります。webhookは、aws EC2 ubuntu16で…

TF-IDF+ janome で、類似文章の抽出。 自然言語処理(3)

index: 概要 環境 参考 コード 処理 テスト 概要 前回の、自然言語処理の関連となります。 TF-IDF TfidfVectorizer + janome で、類似文章の抽出 してみたいと思います。 環境 python 3.5.2 janome sklearn numpy 参考 http://tadaoyamaoka.hatenablog.com/e…

doc2vec + janome で、類似文章の評価。 自然言語処理(2)

index: 概要 環境 参考 形態素解析 コード 関連のページ Github 概要 前回の、word2vec の関連となりますが。 doc2vec + janome で、NLP( 自然言語処理 ) してみたいと思います。 今回は、類似の文章を抽出する例です。 環境 python 3.5.2 janome gensim 参…

word2vec + janome で、類似単語の抽出。 自然言語処理(1)

index: 概要 環境 参考 形態素解析 ライブラリ、NLP関係 学習データ コード Github 概要 word2vec + janome で、NLP( 自然言語処理 ) してみたいと思います。 今回は、類似単語を抽出する例です。 環境 python 3.5.2 janome gensim 参考 https://blog.aidemy…

機械学習の環境を、aws EC2 のdocker へ構築する。

index: 概要 環境 参考 機械学習の docker環境へ構築 docker の配置準備 実行 Github 概要 機械学習の環境を、aws EC2に構築。 docker を使って簡易的に構築すると。少し楽でした。 環境 EC2 amazon Linux 参考 https://qiita.com/yumatsud/items/33bc22f7d8…

raspberry PIで、機械学習インストールのエラー対策

index: 概要 環境 修正の作業 概要 raspberry PIで、久しぶりに機械学習ライブラリを、再構築したのですが。 numpy等のimportエラーが、なかなか回避できず。 対策方法を、メモしたいと思います。 raspbian の問題ではなく、pip3の問題かもしれません。=> 失…

機械学習 + Django WEBアプリの実装

index: 概要 関連 環境 設定等 画面 Github 参考、 以前のflask版の WEB実装 概要 機械学習の機能を、 web フレームワークの Djangoで、web実装する内容となります。 機械学習は、前の不動産の家賃の予測機能です。 関連 knaka0209.hatenablog.comknaka0209.…

機械学習 + flask WEBアプリの実装

index: 概要 参考 環境 Github 機能 まとめ 概要 前回の、flask関連となりますが。機械学習と 軽量web フレームワークのflaskで、 webアプリの実装を行いました。=> 機械学習は、前回の家賃予測の機能を 実装し、学習済みの modelファイルから 予測を出力し…

予測問題、kaggle: PUBG Finish Placement Prediction

index: 概要 コンペ 環境 学習データ 前処理 結果の提出 参考コード 概要 kaggleチャレンジで、 PUBG Finish Placement Prediction 予測問題 コンペ https://www.kaggle.com/c/pubg-finish-placement-prediction ケームの、勝率的な値の、予測らしいですね …

予測問題、kaggle: New York City Taxi Trip Duration

index: 概要 コンペ 参考 環境 学習データ 前処理 結果の提出 概要 kaggleチャレンジで、 New York City Taxi Trip Duration 予測問題 コンペ https://www.kaggle.com/c/nyc-taxi-trip-duration タクシーの、乗車時間を予測する。問題らしいですね 参考 http…

予測問題、kaggle House Prices: Advanced Regression Techniques

index: 概要 参考 環境 学習データ コード 評価 参考のコード 概要 予測問題で、kaggle House Prices: Advanced Regression https://www.kaggle.com/c/house-prices-advanced-regression-techniques 今回は、sklern 重回帰分析で進める事にしてみました。 参…

ディープラーニングで、予測問題 家賃の予測(2) ネットワーク層の変更。

index: 概要 環境 学習データ コード 考察 関連 概要 以前の ディープラーニングの予測問題の関連となります ネットワーク層を増やして、精度のテスト行いたいと思います。 ・ネットワーク構成、層の数は、タイタニック問題と似ていますが 予測問題用のモデ…

ディープラーニングで、kaggle タイタニック問題に挑戦(2) ネットワーク層数の変更

index: 概要 環境 学習データ コード 考察 関連 概要 以前の DL版タイタニック問題の関連となり。 ニュラルネットワークのネットワーク層数を増やして、テストしてみました。 環境 python : 3.5.2 numpy pandas keras : 2.1.3テストは、google colab など 学…