クローラーにプライベートウィキへのアクセスを提供する必要があります。
Wikiはすべての匿名ユーザーに対して閉鎖されています-コンテンツを表示するにはログインする必要がありますが、コンテンツにインデックスを付けることができるように、単一のクローラー(ユーザーエージェント文字列と単一のIPで識別される)のフルアクセスを提供する必要があります。これは内部クローラーであるため、そのリソースへのアクセスはログインが成功した場合にのみ利用可能になります。
単一のクライアントへのアクセスを有効にする方法に関する提案はありますか(クローラーは自分自身をWikiにログインできないため、ユーザーではありません)?