google-search - ボットを使用した複数のグーグル検索と出力

Question

私は製造コードの大きなリストを持っており、それらの製品名を取得する必要があります。通常、一度に1つずつ検索するためにグーグルを使用し、検索結果には通常製品名が含まれますが、今では変換するのに20,000があります:(

このプロセスをスクリプト化して結果をテキストファイルに出力する方法があるかどうか誰かが知っていますか？

Answer 1

次のタスクを実行できます。

1. 指定した検索クエリのGoogle検索の結果をスクレイプします。このスクリプトは、あなたが知っている任意の言語で書くことができます。しかし、確かに後。リクエストのうち、Googleはあなたをボットとして識別し、あなたをブロックします。

2. もう1つの方法は、Googleのカスタム検索APIを使用することです。Google検索から最初の20件の結果がJSONまたはAtom形式で取得されます。その後、そこから結果を取得できます。それでも制限があります。最大数 無料ユーザーの場合、1日あたりの検索数は100です。