Scrapy を使用してサイトをスクレイピングしていますが、API の一部が「if-none-match」ヘッダーなしで JSON データを返していません。
100 を超える API のリストがあるため、有効な JSON ファイルを取得するための自動ヘッダーを生成したいと考えています。誰かがこれを処理する方法を知っているか、それを取り除く他の方法があります。
前もって感謝します。
Scrapy を使用してサイトをスクレイピングしていますが、API の一部が「if-none-match」ヘッダーなしで JSON データを返していません。
100 を超える API のリストがあるため、有効な JSON ファイルを取得するための自動ヘッダーを生成したいと考えています。誰かがこれを処理する方法を知っているか、それを取り除く他の方法があります。
前もって感謝します。