私はスクレイピー フレームワークを使用して、さまざまな Web サイトからモバイルの名前、価格、および仕様をスクレイピングしています。すべてのデータを正常にスクレイピングし、MySQL データベースに保存しました。
表構造 ID || 製品の URL || 名前 || 価格 || 仕様 ||
翌日、一部の製品の価格は、データベースに保存されている前日の値から減少します。データベースの価格を更新したい
毎日真夜中に 1 つの Python プログラムが実行され、価格が変更されたアイテムを確認し、変更された場合は値を更新します。
毎日、すべての製品リンクを再度スクレイピングしたくありません。約 20,000 リンク
ですから、価格が変更された製品リンクのみをスクレイピングする必要があるように、適用すべきロジックを教えてください。