最近の記事で、私がしばらく取り組んできたプロジェクトを取り上げることになりました。多数のサイト用の Web サービス フロント エンドを作成して、フォームの自動入力と結果からのデータ取得、およびサイトの他の領域を可能にしたいと考えています。私はSeleniumとカスタム コードを使用してある程度の成功を収めましたが、サイトを追加するのが簡単な作業 (おそらく開発者さえも必要としない作業) までこれを拡張したいと考えています。
Kapow Web データ サーバーは、これを実現するように見えますが、非常に高価であると言われています (現在見積もり待ち)。誰かがこれを経験したことがありますか、または代替案（理想的にはオープンソース）を提案できますか？
免責事項:サード パーティの Web サイトからのデータ取得の自動化に関する潜在的な合法性の問題を認識しています。このツールは価格比較システムで使用するように設計されており、それに統合されたすべての Web サイトは、所有者の明示的な許可を得て作成されます。サイトが API を提供する場合、これは明らかに好まれるアプローチです。
ありがとう