0

ある単語の Google 検索で、http ページの最初の 1000 個の URL を取得するコードを作成しようとしています。このコードを Python で使用して、最初の 1000 個の URL を取得しました。

import GoogleScraper
import urllib

urls = GoogleScraper.scrape('english teachers', number_pages=2)
for url in urls:
    print(urllib.parse.unquote(url.geturl()))

print('[!] Received %d results by asking %d pages with %d results per page' %
        (len(urls), 2, 100))`

しかし、このコードは 0 の受信結果を返します。便利な方法で Google 検索から多くの URL を取得する別の方法はありますか? xgoogle および pygoogle モジュールも試しましたが、ページに対する少量のリクエストのみを処理できます。

4

1 に答える 1