1

ロボットから解析する必要があるホームページ(www.site.com)を除いて、すべてのサイトページをすべてのスパイダーロボットに非表示にする必要があります。

誰かが私がそれをどのように行うことができるか知っていますか?

4

1 に答える 1

2

タグにインデックスを付けたくないすべてのページに追加<meta name="robots" content="noindex" />

またはrobots.txt、ドキュメントルートに作成して、次のようなものを配置することもできます。

User-agent: *
Allow: /$
Disallow: /*
于 2012-10-09T20:18:52.173 に答える