google-chrome - 特定のパスをクロール/インデックス作成から除外するにはどうすればよいですか?

Question

私のウェブサイトには次の URL 構造があります。

ユーザーアカウント：

http://www.mydomain.com/username

ユーザーには、次のアイテムが含まれています。

http://www.mydomain.com/username/item/itemId

ユーザー アカウントがインデックス化されず、すべてのアイテムがインデックス化されるようにするには、robots.txt で何を設定する必要がありますか?

Answer 1

実際、robots.txt ではそれが可能になるとは思えません。usernameGoogle のワイルドカード サポートでは、 if 、item、およびitem-idが任意の文字列になる可能性があるため、おそらくサポートされません。username少なくとも、each を指定する必要があります。

Google のRobots.txt の仕様ページをご覧ください。あなたが望むことをする他の方法があるかもしれません。