jsoup を使用してカスタム クローラーを作成しました。特定のリスティング ページからすべてのデータをスクラップできます。しかし、 pagination を持つページの場合、 pagination 要素からリンクを取得するにはどうすればよいですか? Amazon、eBay などに存在する小売りリストと同様に、製品リストの最初のページの URL を jsoup に渡します。それは正常に動作します。しかし、残りのページのリンクを取得するプロセスを自動化するにはどうすればよいですか。
ページネーションのクラスをハードコーディングすることで要素を取得できることを理解しています。しかし、私はそれを行う一般的な方法を探しています。