ajax - googlebotクロールWebサービス

Question

Webサービスに使用されるリンクをクロールしないようにgooglebotを作成する方法はありますか？URLでWebサービスにアクセスしようとすると、パラメーターが渡されていない場合に500エラーが返されます。または、パラメータなしでURLでWebサービスにアクセスしようとしたときにhttp 500エラーを防ぐ方法もありますか？

ありがとう。

Answer 1

こちらをご覧になり、robots.txtを作成できます。