サイトと robots.txt ファイルに問題がありました。ロボットで /feed と /trackback の URL を許可しないようにしましたが、何らかの理由でhttp://www.mydomain.net/year/month/post.html/feedとhttp:/のような Google Webmaster の URL をまだ受け取っています。 /www.mydomain.net/year/month/post.html/trackbackを修正する方法がわかりません。それが起こった後、私のサイトは訪問時にダウンします。
誰でも私を助けてもらえますか?
よろしく
これは私の robots.txt です
User-agent: *
Disallow: /cgi-bin
Disallow: /wp-admin
Disallow: /wp-includes
Disallow: /wp-content/plugins
Disallow: /wp-content/cache
Disallow: /wp-content/themes
Allow: /wp-content/uploads/
Disallow: /trackback
Disallow: /?ref=
Disallow: /feed
Disallow: /comments/feed
Disallow: /feed/$
Disallow: /*/feed/$
Disallow: /*/feed/rss/$
Disallow: /*/trackback/$
Disallow: /*/*/feed/$
Disallow: /*/*/feed/rss/$
Disallow: /*/*/trackback/$
Disallow: /*/*/*/feed/$
Disallow: /*/*/*/feed/rss/$
Disallow: /*/*/*/trackback/$
Disallow: /?s=
Disallow: /search
User-agent: Googlebot-Image
Allow: /
Sitemap: http://www.mydomain.net/sitemap.xml