テスト用のサブドメインがあります。このフォルダーを許可しないように robots.txt を設定しました。
一部の結果は、何らかの理由でまだ表示されています。私が最初に robots.txt を設定しておらず、Google がそれらの一部をまだ削除していないことが原因ではないかと考えました。
現在、このフォルダー内の個々の joomla サイト内の robots.txt ファイルが原因で、Google がそれらをインデックス化し続けているのではないかと心配しています。理想的には、ロボットがライブになったときにフォローするために robots.txt を元に戻すことを忘れないようにしたいので、それを止めたいと思います (念のため)。
このフォルダーの上のフォルダーにある robots.txt でこれらを明示的にオーバーライドする方法はありますか?