java - Javaでクエリを使用してプログラムでWebページを取得する方法

Question

私が必要としているのは、検索エンジンにクエリを送信し、最初の100のWebページを取得して、後でそれらのコンテンツを処理することです。検索エンジンにクエリを送信し、検索エンジンから生成されたWebページを処理するには、プログラム内で実行する必要があります。google-apiやbing-apiなどの検索エンジンAPIを使用する必要がありますか、それとも別の方法がありますか？

Answer 1

コメントで言われたことを要約すると：はい、検索エンジンAPIが最良の方法です。

結果をWebページとして取得し、それを解析することは、考えられる最悪のアプローチです（APIの使用を耐えられないものにする特定のニーズがない場合）。