プログラミング

公開されているデータに月々2000円も払うのはバカらしいです。しかし、膨大なデータをコピペで集めるのも限界があります。そこでスクレイピングです。この記事では、netkeibaからレース結果をスクレイピングで集める方法を解説しています。

FANZA動画（旧DMM）の動画ページにおけるレビューをスクレイピングしていきます。今回の記事では、より確実にコンテンツをスクレイピングできるように対策を加えています。Seleniumのelement_to_be_clickableを利用すれば、対象となる要素がクリック可能となるまで待ち状態となります。

Instagramハッシュタグ検索の結果をスクレイピングする方法を解説します。やはり、Instagramは簡単にスクレイピングされたくないのでしょうね。Twitter並みにスクレイピングに対して、警戒しています。でも、ブラウザで見れる限りはスクレイピングできてしまうのです。

Instagramのスクレイピングは難しいです。でも、PythonでSeleniumを使えば簡単にスクレイピングできます。この記事では、Instagramをスクレイピングする方法を解説しています。この記事を読めば、ハッシュタグ毎の投稿件数を簡単に取得できるようになります。

PythonでのJSONの扱いに混乱しませんか？Pythonを学び始めた当初、json.loadとjson.loadsの違いがわかりませんでした。冗談抜きで、「s」があるかないかを参考ページの誤記だとばかり考えていました。この記事では、これらのことをまとめています。

Amazonのセラー（販売者・出品者）一覧を取得する方法を説明しています。セラー情報は、競合調査のために利用されることが多いようです。Python上でSeleniumを利用することにより、スクレイピングしています。Amazonはスクレイピング対策を強めていますが、無駄な抵抗でしょう。

また、Amazonがスクレイピングの対策をしてきました。今回はCookie（クッキー）のある・なしを見ています。本当にAmazonのスクレイピングは、いたちごっこですね。でも、これをやっていくとスクレイピングのスキルはドンドンと向上していきます。ドラゴンボールのようなモノですね。

「Amazonのやらせレビューチェックをまとめてやれば便利じゃね？」と思いませんか？。サクラチェッカーとレビュー探偵の結果をまとめて見ることができれば、効率的にAmazonで買い物ができるようになります。それを実現するための方法を解説しています。Pythonで並列処理を駆使しています。

FANZA動画（旧DMM）にリベンジです。数年前には、全く歯が立ちませんでした。何をリベンジかと言うと、スクレイピングです。リベンジの結果はもちろん、実際にスクレイピングを試みたサンプルコードを解説しています。スクレイピングのスキル向上を目指す方に参考となる内容です。

レシピサイトの検索はイマイチだと思いませんか？クラシルは個人的には好きな料理レシピサイトです。でも、やはり検索がイマイチです。だから、クラシルをPythonでスクレイピングして、自分の望む検索機能で検索できるようにします。と言っても、クラシルのスクレイピングはかなり簡単ですけどね。