機械学習

350万件！！Amazonのレビューをスクレイピングで集めました。みなさんは、機械学習用の日本語テキストをどうやって用意していますか？個人では、なかなか難しいはずです。残された手段は、スクレイピングしかありません。大量データの扱いから、データのクレンジグについてまで説明しています。

TensorFlowを利用した場合における、モデルの保存と復元、そしてモデルの再利用までを解説しています。簡単にすぐ検証できるようにコピペで動くコードを載せています。この記事を読めば、すぐにTensorFlowでのモデルの保存・復元・利用を検証可能です。

日本のAI企業・AIベンチャーの未来は暗いです。AIに関しての現実を知れば、私の言っていることが正しいと思うでしょう。結局、GAFAMを中心としたITの巨人であるGoogleやAmazonなどには勝てないのです。悲しいけど、それが現実です。その現実を受け入れて、私たちはできることをやっていきましょう。

断言します。感情分析にいて単語感情極性対応表（ネガポジ辞書）は使い物になりません。感情分析をやりたければ、別の方法を採用した方がいいです。この記事では、その別の方法に関しても説明しています。感情分析に興味がある方は、この記事を参考にしてみてください。

Googleの公開した自然言語理技術「BERT」を使えば、80％の正解率で感情分析ができるようになりました。やはり、機械学習の結果はデータに依存するということがわかる事例だと思います。この記事では、そのデータを集める方法も解説しています。

機械学習で最も大変なことを何だと思いますか？アルゴリズムを用意することでしょうか？プログラミングすることでしょうか？いやいや、そんなことはPythonやTensorFlowでクリアできます。最も大変なことは、質の良いデータを用意することです。この記事では、その難題を解決する方法を解説しています。

Amazonのレビューをセンチメント分析（感情分析）する方法を説明しています。スクレイピングによるAmazonレビューの取得から、Mecabによる形態素解析、散布図・ヒストグラムの表示まで、この記事だけ多くを学ぶことが可能です。

「Pythonではじめる機械学習」は良書ですが、動かないコードがあります。Pythonと機械学習をある程度は理解できるようになってきたので、「Pythonではじめる機械学習」の動かないコードを動くように修正していきます。自分自身の勉強を進めつつ、初心者の助けになれば幸いです。

私は機械学習の勉強に挫折しています。なんと、2回も挫折しています。だからこそ、挫折する理由がわかりました。そして、その理由を解消する方法もわかりました。この記事ではそれらをまとめています。今後は、それらの反省から「Pythonではじめる機械学習」を教材にして、機械学習の勉強にリベンジします。

情弱になって人生で無駄な時間を過ごさないください。Jupyter Notebookはもうオワコンです。これからは、JupyterLabを使うようにしましょう。この記事では、JupyterLabでのノートブックに関する情報をまとめています。