私は、Amazon クラウドの IP から大量のヘッド リクエストを頻繁に受け取るサイトで作業しています。彼らがアクセスするパターンに基づいて、私は彼らが良くないことをしていることに非常に自信を持っています. これに対抗するために、すべての HEAD リクエストに対して空のレスポンスを返すことを検討していますが、このサイトのランキングに誤って影響を与えたくありません。
この変更によって影響を受ける可能性のあるインデックス作成プロセスの一部として HEAD リクエストを合法的に使用する検索エンジンを知っている人はいますか?