Find centralized, trusted content and collaborate around the technologies you use most.
Teams
Q&A for work
Connect and share knowledge within a single location that is structured and easy to search.
検索エンジンが次のようなスクリプトURLのインデックスを作成しないようにする方法:
domain.tld /?[ここにあるものは何でも]
robots.txt
User-agent: * Disallow: /?
動作するようです。
ただし、メインページのインデックス作成を可能にするためです。
URLエンコードされた「?」を使用します (%3D)
%3D
User-agent: * Disallow: /%3D
ソース:http ://www.robotstxt.org/norobots-rfc.txt