-1

私のサイトhttp://www.mustseeindia.com/places-around-bangalore "" は有効な URL です。

クロール中に、MSN ボットが文字列を追加し、クロール エラーが発生します。

MSN ボットによって追加された文字列- "&layout=button_count&show_faces=false&width=80;&action=like&font&colorscheme=light&height=25"

MSN ボットによって生成された間違った URL - http://www.mustseeindia.com/places-around-bangalore&layout=button_count&show_faces=false&width=80;&action=like&font&colorscheme=light&height=25

これにより、サイトの何千ものページが MSN によってクロールされなくなります。これを処理するにはどうすればよいですか?

4

1 に答える 1

1

これは基本的な URL 操作であり、あなたのサイトにトリッキーな点は見当たりません (マークアップにはエラーがいっぱいありますが)。したがって、これは実際の msnbot ではなく、msnbot としてクローキングされた下手なスパムボット/ハーベスターであると思われます。

于 2011-01-11T12:33:29.757 に答える