検索エンジン (google、yahoo、bing など) から結果を取得するための Python ライブラリを探しています。
私はグーグルのためにのみ見つけました - > http://github.com/kevinw/xgoogle/tree/253db7ddc8603a9dcb038ae42684cf3499a22a4b
誰かが複数の検索エンジンの 1 つを知っていますか?
検索エンジン (google、yahoo、bing など) から結果を取得するための Python ライブラリを探しています。
私はグーグルのためにのみ見つけました - > http://github.com/kevinw/xgoogle/tree/253db7ddc8603a9dcb038ae42684cf3499a22a4b
誰かが複数の検索エンジンの 1 つを知っていますか?
Scrapyはスクレイピング用の非常に優れたフレームワークですが、必要なサイトで動作するようにコードを作成/構成する必要があります。
それらを書くのはそれほど難しくありません。私は通常、phpを使用します。curl を調べてページを取得し、次に dom オブジェクトと dom xpath を取得します。xpath を使用して、必要な結果の部分を選択できます。
firebug と firexpath をインストールすれば、Xpath はとてもシンプルです。私は現在位置チェッカーに取り組んでいます。同じ考えですが、キーワードに基づいてドメインの位置を返します。
scraper, you can scrape bing,google, baida,yahoo.check link