0

Bing Azure Web Search Api を使用してメタサーチ サイトに取り組んでいます。2日から(問題のない1か月後)、悪意のあるボットからのスパム検索を受信しないようにするという問題に直面しています。彼らはサイトをフラッディングしているのではなく、低速モードでクエリを実行します (1 または 2 クエリ/秒)。IP はすべて異なります。公開されているブラック リストには含まれていません。明らかに、検索インターフェイスにキャプタを使用することはできません。

この問題を回避するには?

4

1 に答える 1

1

robots.txt一般的なトリックは、立ち入り禁止エリアを設定してから、このボット トラップに目に見えないリンクをいくつか散りばめることです。人間の訪問者はそれがそこにあることを発見しません。行儀の良いボットはそこに行きません。時折の訪問者に疑いの利益を与えたいと思うかもしれませんが、繰り返し違反者はブラックリストに登録され、TCP レベルで拒否される可能性があります (または、http://projecthoneypot.org/を参照することをお勧めします) 。

于 2012-09-18T10:54:10.370 に答える