私は個人名の大規模なディレクトリを、検索エンジンで可能な限り索引付けしたい、一般に公開されているカテゴリ固有の情報と一緒に持っています。これらの名前をサイト自体に掲載することは人々にとって問題ではありませんが、自分自身を「Google」したときに検索結果に表示されたくない人もいます.
これらの名前をページ内にリストし続け、ページをインデックスに登録したいのですが、検索エンジンで指定された名前やキーワードをインデックスに登録したくありません。
これはページごとに行うことができますか、それとも 2 つのページを設定する方が適切な回避策でしょうか:
利用可能なオプション:
- user-agent=robot/search engine の場合、PHPはキーワードを検閲できます
- ロボットを検閲されていないコンテンツに制限するためのhtaccess
- 索引付けしない単語を定義するメタタグ?
- JavaScriptはロボットからキーワードを非表示にすることができますが、それ以外の場合は表示可能です