java - HTMLソースにはないがブラウザから見えるデータを取得するには?

Question

必要なデータはブラウザから表示されますが、html ソース コードからは見つかりません。データはスクリプトによって生成されたと思われます。こういうデータをグラデーションにしたい。Jsoupを使用することは可能ですか? Jsoup が Javascript を実行しないことは承知しています。

このページを例にとると、Academics -> COLLEGES & SCHOOLS の下にあるすべての大学と学校を取得したいと思います。

Answer 1

DOM コンテンツがスクリプトまたはプラグインを介して生成される場合は、phantomjsのようなスクリプト可能なブラウザーを検討する必要があります。次に、JavaScript を記述してデータを抽出します。

私はあなたのリンクをチェックしませんでした。どのページにも固有ではない一般的な回答を探していると思います。