robots.txt - 特定のアクションを禁止する方法は?

Question

禁止したいのですが、許可し/questions/{ID}/fooません/questions/{ID}。

構文はDisallow: /questions/*/foo?

Answer 1

適切な構文を探し始めるのに適した場所は、次のとおりです。

User-agent または Disallow 行では、グロビングと正規表現がサポートされていないことにも注意してください。User-agent フィールドの「*」は、「任意のロボット」を意味する特別な値です。"User-agent: *bot*"具体的には、 、 、のような行を含めることはできませ"Disallow: /tmp/*"ん"Disallow: *.gif"。