問題タブ [apify]
For questions regarding programming in ECMAScript (JavaScript/JS) and its various dialects/implementations (excluding ActionScript). Note JavaScript is NOT the same as Java! Please include all relevant tags on your question; e.g., [node.js], [jquery], [json], [reactjs], [angular], [ember.js], [vue.js], [typescript], [svelte], etc.
javascript - 無限スクロールで Web ページを適切にクロールする方法は?
無限スクロールのあるサイトからデータをスクレイピングするにはどうすればよいですか?
私がやろうとしているのは、Google Play ストア ( https://play.google.com/store/apps/category/GAME/collection/topselling_free?hl=en ) からすべてのデータを取得することです。
Apify ( https://www.apify.com/ ) を使用して Google Play ストアをクロールしています。「Top Free in games」のすべてのリンクを取得してから、トップ ゲームのすべてのタイトルと詳細を取得したいと考えています。
残念ながら、ユーザーがページの一番下までスクロールすると、ページは新しいデータをロードし、新しいデータを取得する方法がわかりません。
これは私のページ機能です:
}
ゲームページで詳細を確認できるように、追加のゲームをロードしてリンクを取得するにはどうすればよいですか?
例またはサンプルコードをいただければ幸いです。