solr - Google のような検索エンジンを作成したいのですが、どの検索エンジンを使用すればよいですか?

Question

Googleのような検索エンジンを作りたいです。どの検索エンジンを使用すればよいですか? solrまたはelasticsearchはそれに適していますか?

Answer 1

（開示：この投稿の作者は、リンクされている製品と提携しています）

OpenSearchServerもお勧めします。Webクローラーは成熟しています。これを使用して、単一のインスタンスで数千のWebサイトにインデックスを付けます。

重要な点は、1つのアプリケーションにWebクローラーと検索エンジンが含まれていることです。このインターフェースを使用すると、データモデルの設定、関連性のカスタマイズ、クロールプロセスの管理を行うことができます。

Answer 2

多分Nutchは良い出発点です。特に、クロールも含まれており、Lucene を使用しているためです。Lucene は Solr でも使用されており、最新バージョンには優れたSolrCloud機能があり、スケーラビリティが容易です。