賛成票を投じたり、反対票を投じたり、投稿にフラグを立てたりするなどのことを行う、ajax化されたリンクがたくさんあります-標準的なコミュニティモデレーションのものです。
問題は、Googlebot がこれらのリンクをクロールし、賛成票を投じ、反対票を投じ、項目にフラグを立てることです。
これを robots.txt に追加すると、Googlebot はこれらのリンクをクロールできなくなりますか? または、他に何かする必要がありますか?
User-agent: Googlebot
Disallow: /item/*/flag/
Disallow: /item/*/vote/
ありがとう!
編集:メソッドを投稿に変更しましたが、googlebot はまだ投稿にフラグを立てています。
構文は次のとおりです。
<a href="onclick="$.ajax({data:'authenticity_token=' + encodeURIComponent('blahblahblah'), dataType:'script', type:'post', url:'/item/flag/236?method=post'}); return false;">
何かご意見は?