ウェブサイトの最初の数日間、いくつかのリンクの生成を間違えました。それらに従うと、データベースエラーが出力されます。
Google ボットがこれらのリンクをたどろうとした結果、ウェブマスター ツールでクロール エラーとして表示されるようになりました。その後エラーを修正しましたが、Google は引き続きそれらをクロールしようとします。
そのようなリンクはもはや存在せず、どこにもつながっていないことを Google に伝えるにはどうすればよいでしょうか? リンクが有効であり、それらをインデックスに登録しても問題ないという 301 リダイレクトの原因を特定することはできません。
ページが論理的な置換なしでなくなった場合、通常は404エラーを返す必要がありますが、この場合は返すことを検討し410 Goneます-これは、ページが完全に削除されて戻らないため、Googleのインデックスから削除する必要があることを示します。
問題のURLの既存のコードベースを調べて、それらへのリンクが残っていないことを確認することはおそらく価値があります。
301の301は、リンクが有効であることを意味するわけではなく、301は永続的に移動されます。これは、ここで探していたページが現在他の場所にあることをグーグルに伝え、グーグルを新しい場所に誘導します。あなたの場合、物事の音からは当てはまりませんが、あなたがそれを説明した方法とは微妙に異なります。
詳細については、http：//en.wikipedia.org/wiki/List_of_HTTP_status_codesを参照してください。
robots.txt でそれらをマークするだけです