多くの日付と目的地について、特定の Web サイトから航空券の価格を収集したいと考えています。URL でソース、宛先、および日付を指定できますが、Web サイトは AJAX を使用してデータをフェッチするため、ページの応答で価格をすぐに取得できません。そのような場合、任意のプログラミング言語を使用してデータを取得できます。
このタスクは、Web ブラウザーを使用して各 URL を次々にロードし、ページをレンダリングさせてから、必要なタグを (CSS セレクターまたは JS を使用して) 探して保存する方がよいと考えました。ファイルまたはログに移動し、次の URL に移動します。後でデータを確認して、最良の価格を見つけることができました。
しかし、残念ながら、このタスクを実行するためのブラウザー拡張機能/アドオンが見つかりませんでした (Linux ブラウザーは問題ありませんが、Firefox と Chrome の可能性が高いです)。私はすでに GreaseMonkey に精通していますが、それは彼が行うように設計された種類のタスクではありませんが、同様のツールまたは同様の方法で動作することになると思います。
このタスクに使用できるツールを知っている人はいますか? 他のアプローチも大歓迎です！