Google によるサブドメインのクロールを禁止する方法を教えてください。
ウェブスペース フォルダの写真を作成しました。awesom メディア フォルダーは、メイン サイト www.awesom-media.de があるフォルダーです。フォルダ
もう 1 つはサブドメインです。私が欲しいのは、Googleがこれをクロールすべきではないということですが、方法がわかりません。
awesom メディア フォルダーに robot.txt はありませんが、/ の部分で確認できます。robot.txt の内容は次のとおりです。User-agent: *
Disallow:
以上です。
サブドメインをクロールしないように Google に指示するにはどうすればよいですか
すべてのサブドメインが特定のフォルダーに直接ルーティングされる場合 (たとえば、automagazin.awesom-media.deのようなものがフォルダーを使用する場合auto-magazin)、robots.txt を次のように配置します。
User-agent: *
Disallow: /
Google で許可しないサブドメインのすべてのフォルダーに。私はこれらが（そしておそらくもっと）あるauto-magazinと思います。future-magazin
現在、それをルート フォルダに配置していますが、Google ではおそらくまったく見ることができません。[サブドメイン].awesom-media.de/robots.txtを読み込んで、robot.txt が読み込まれるかどうかを確認してください。