-1

http://www.mysite.com/adminすべてのボットがサブディレクトリとそのディレクトリ内のファイルとフォルダーをクロールするのをブロックしたいと考えています。たとえば、次の/adminような内部にさらにディレクトリがある場合がありますhttp://www.mysite.com/admin/assets/img

これを行うために robots.txt に含める正確な宣言が何であるかはわかりません。

それは次のとおりです。 

User-agent: *
Disallow: /admin/

または：

User-agent: *
Disallow: /admin/*

または：

User-agent: *
Disallow: /admin/
Disallow: /admin/*
4

1 に答える 1

0

ネットで入手できる情報に基づいて (すべてを取得することはできませんが、一部のフォーラムでは実際に問題が報告されています。たとえば、ここやここなど)見られたくないということです（「管理者」は機密コンテンツのように見えます...）。

確認した後、それがあなたの最初の発言であることを確認します。ここを参照

于 2013-09-01T20:37:42.840 に答える