robots.txt を使用して、ボットのクロール速度を変更できます。しかし、Googlebot は robots.txt を考慮していないため、別の方法を探します。
私のサイトでは、いくつかのページが非常に頻繁に変更され、小さな変更が加えられています。1 日 20 ~ 30 文字言ってください。しかし、Googlebot に頻繁に再インデックスしてほしくありません。たとえば、Googlebot に毎月インデックスを付けてもらいたいとします。次のようなメタ タグで作成することは可能ですか。
<META HTTP-EQUIV="expires" CONTENT="Wed, 26 Feb 1997 08:21:57 GMT">
Googlebot はこれを無視しますか? または、別の解決策をお勧めできますか?