遅くまで、私は Web スクレイピングに関する作業を行っています。いくつかの調査と分析の後、私はそれを理解することができました。しかし、グーグルで調べても適切な答えを見つけることができない点に固執しています。私が立ち往生している点は、Webスクレイピングを通じて、ログインユーザーとパスワードを使用してイントラネットページにログインすることです。コード内の特定のURLについて、データを取得できますが、URLが変更されると、コードがログインに失敗します.コードが間違った URL にヒットした理由。リンクにヒットするコードは、更新コマンドで URL にヒットする一種のエージェントです。
Webスクレイピングに人工知能を適用することについて理解するのに役立つ良いツールまたは本を知りたいです。これにより、エージェントを手動で再構成することなく動的に処理できます。どんな助けでも大喜びです。