以下のような robots.txt がありますが、Google はまだ私のドメインをインデックスに登録しています。基本的に、彼らは mydomain.com をインデックスに登録しましたが、mydomain.com/any_page はインデックスに登録しませんでした
UserAgent: *
Disallow: /
/
つまり、ドメインのルートだと思っていた場所よりも先に戻るにはどうすればよいでしょうか?
このドメインは進行中の作業であることに注意してください。したがって、Google や他の検索エンジンに 1 分間表示させたくないのです。