マルチサイトのセットアップを維持するために Aegir/Barracuda/Nginx を使用しています。私の「ファイル」ディレクトリは、マウントされた「ファイル」ディレクトリにシンボリックリンクされています。したがって、開発目的で使用するサイトを複製すると、同じ「ファイル」ディレクトリが使用されます。robots.txt の場所として sites/mydomain/files を使用する現在の慣行の問題は、新しい複製された開発サイトにカスタムの方向を設定して、クローラーのインデックス作成を停止することができず、重複したコンテンツに対してペナルティを受けることです。回避策はありますか?
多くのメディア ファイルを保持し、サイトを複製するたびに "files" ディレクトリ全体を再作成するのは意味がないため、私のファイル ディレクトリはほとんどシンボリック リンクする必要があります。