怠け者なので、セロリ+リクエストを使用して独自のスクレイピングサービスを実装する代わりに、スクレイピーを使用しようとしています(そこにいて、それを行いました)。監視したい N ページのリストがあるとします。ページ X を取得してそのコンテンツを読み取った後、(コンテンツによっては) 後で、たとえば 2 時間経過したら再スキャンするようにシステムに指示したいと考えています。
Scrapyでそのようなことは可能ですか?
怠け者なので、セロリ+リクエストを使用して独自のスクレイピングサービスを実装する代わりに、スクレイピーを使用しようとしています(そこにいて、それを行いました)。監視したい N ページのリストがあるとします。ページ X を取得してそのコンテンツを読み取った後、(コンテンツによっては) 後で、たとえば 2 時間経過したら再スキャンするようにシステムに指示したいと考えています。
Scrapyでそのようなことは可能ですか?