プロジェクトに複数のスパイダーがあったので、scrapydサーバーにアップロードして実行することにしました。プロジェクトを正常にアップロードしました。コマンドを実行すると、すべてのスパイダーが表示されます。
curl http://localhost:6800/listspiders.json?project=myproject
次のコマンドを実行すると
curl http://localhost:6800/schedule.json -d project=myproject -d spider=spider2
与えられたスパイダーが1つしかないため、1つのスパイダーしか実行されませんが、ここで複数のスパイダーを実行したいので、次のコマンドは、scrapydで複数のスパイダーを実行するのに適していますか?
curl http://localhost:6800/schedule.json -d project=myproject -d spider=spider1,spider2,spider3........
そして後で、cronジョブを使用してこのコマンドを実行します。つまり、これを頻繁に実行するようにスケジュールします。