古い (非常に古い、HTML ハードコーディングされた Web サイト) を置き換える予定のクライアント用の Web サイトを完成させました。問題は、(今のところ) 古い Web サイトと Web サーバー上のすべてのファイルを元の場所に保存したいということです。これは、PHP と Wordpress で作成された新しい Web サイトで問題を引き起こすことはありませんが、Google (およびその他) が検索ロボットとインデックス作成を使用して立ち寄ると、大きな問題になります.
Google 検索を実行すると、古い HTML ファイルが引き続き検出されます。古い HTML ファイルを Web サーバーに「保持」する方法はありますか。ただし、最初はロボットがインデックスを作成しないようにし、誰かがhttp://wwwなどの HTML ページに移動しようとしている場合に備えてください。 .clientdomain.com/old_index_file.html、リダイレクトされていますか? 最後の部分は .htaccess で実行できると思いますが、それを検索するのに役立つものは何も見つかりませんでした。
ロボットとエージェントが HTML ファイルをインデックスに登録できないようにすることに関する最初の質問ですが、 robots.txtファイルに次の 2 行を入れてみました。
Disallow: /*.html$
Disallow: /*.htm$
しかし、うまくいくかどうかはわかりませんか?
私はこれを完全に間違った方法で処理するかもしれませんが、クライアントが古い Web サイトを同じサーバーの元の場所に保持するように要求したことは一度もありません。
ありがとう
- メスティカ