0

YQl には Web ページをスクレイピングするだけでなく、その Web ページのリンクをたどって詳細を取得するための優れた方法がありますか?

例としては、インデックス ページに各ニュース エントリのタイトルが表示されるブログのようなものがありますが、そのタイトル リンクをクリックして、ニュース記事や関連する写真などを取得する必要があります。各ニュース エントリ ページからデータを取得し、インデックス ページでもページ分割された結果を処理します。

YQLがこれに対応できる場合、誰かが例を提供できますか? そうでない場合、誰かが良い代替案を提案できますか?

4

1 に答える 1

0

最初に YQL を呼び出してリンクを取得するサービスを AppEngine でホストすることにより、同様の問題を解決しました。次に、リンクを繰り返して URL のコンテンツを取得します。

于 2013-04-30T10:41:09.560 に答える