1

私は現在、Google の検索結果からデータをスクレイピングする必要があるアプリに取り組んでいます。たとえば、google.com/search?q=domain.comなどです。しかし、Google はいくつかのリクエストを行った後、私の IP アドレスをブロックします。Google API があることは知っていますが、データを直接スクレイピングするだけのサイトがたくさんあります。

4

2 に答える 2

1

Google の検索結果をスクレイピングすることは、利用規約に反します。Google はそのような行為を積極的に思いとどまらせ、そうする人をブロックします。彼らは自分たちの情報をあなたと無料で共有していますが、あなたがそのすべてのコピーを取得しようとしていることに感謝していません.

ドメインの独自のクロールを行うことをお勧めします。

于 2012-10-12T16:43:26.357 に答える