私はscrapydでPortiaスパイダーを展開しています。展開中に、リンクの解析ごとに URL を渡しています
例: スパイダーによってクロールされるhttp://www.example.com/query1
URL (URL_1 など) と、私が渡す URL (URL_2 など) はhttp://www.example.com/query2
、コンテンツを抽出するためのものです。
私のスパイダーは URL_2 からコンテンツを抽出し、それぞれのアイテムに保存しました。これで問題ありません。
[URL]アイテムとURL_2をアイテムに格納していますが、[URL]アイテムにURL_1を格納したいです。
解決策はありますか?