0

Solrを使用して単語一致ヒットリストを作成します。これにより、特定の単語のすべての出現箇所がコンテキストとともに表示されます。

英語の例:

...bla bla1 <b>dog</b> bla bla 1...
...bla bla2 <b>dog</b> bla bla 2...
...bla bla3 <b>dogs</b> bla bla 3
...bla bla4 <b>dogging</b> bla bla 4...
...bla bla5 <b>dog</b> bla bla 5...

コンテキストのサイズをカスタマイズできることが重要です。(1文以上の場合もあります。)

私の質問:Solrでこれを行うにはどうすればよいですか?

Lucene 4.1は、たとえばFastVectorHighlighterを使用してこれを行うことができます。

    //indexing
    FieldType offsetsType = new FieldType(TextField.TYPE_STORED);
    offsetsType.setIndexOptions(IndexOptions.DOCS_AND_FREQS_AND_POSITIONS_AND_OFFSETS);
    offsetsType.setStored(true);
    offsetsType.setIndexed(true);   
    offsetsType.setStoreTermVectors(true);
    offsetsType.setStoreTermVectorOffsets(true);
    offsetsType.setStoreTermVectorPositions(true);
    offsetsType.setStoreTermVectorPayloads(true);

    doc.add(new Field("content", fileContent, offsetsType));


    //searching
    IndexReader reader = DirectoryReader.open(FSDirectory.open(new File(indexPath)));
    IndexSearcher searcher = new IndexSearcher(reader);
    Analyzer analyzer = StandardAnalyzer(Version.LUCENE_41);
    QueryParser parser = new QueryParser(Version.LUCENE_41, "content", analyzer);
    Query query = parser.parse("dog");
    TopDocs results = searcher.search(query, 10);

    for (int i = 0; i < results.scoreDocs.length; i++) {
            int id = results.scoreDocs[i].doc;
            Document doc = searcher.doc(id);
            FastVectorHighlighter h = new FastVectorHighlighter();
            String[] hs = h.getBestFragments(h.getFieldQuery(query), reader, id, "content", contextSize, 10000);
            if (hs != null)
                    for(String f : hs)
                        System.out.println(" highlight: " + f);
    }

しかし、どうすればSolrに同じことをするように依頼できますか?

私の試用版はこれ(solrconfig.xml)でした:

<fragmentsBuilder name="colored" class="org.apache.solr.highlight.ScoreOrderFragmentsBuilder">
 <lst name="defaults">
 <str name="hl.tag.pre"><![CDATA[
      <b style="background:yellow">,<b style="background:lawgreen">,
      <b style="background:aquamarine">,<b style="background:magenta">,
      <b style="background:palegreen">,<b style="background:coral">,
      <b style="background:wheat">,<b style="background:khaki">,
      <b style="background:lime">,<b style="background:deepskyblue">]]></str>
 <str name="hl.tag.post"><![CDATA[</b>]]></str>
 </lst>
</fragmentsBuilder>

<requestHandler name="drupal" class="solr.SearchHandler" default="true">
...
<str name="hl">true</str>
<str name="hl.fl">content</str>
<int name="hl.snippets">5000</int>
<int name="hl.fragsize">300</int>
<str name="hl.simple.pre"><![CDATA[ <b style="background:yellow"><i> ]]></str>
<str name="hl.simple.post"><![CDATA[ </i></b> ]]></str>
<str name="hl.mergeContiguous">true</str>
<str name="hl.fragListBuilder">single</str>
<str name="hl.useFastVectorHighlighter">true</str>

しかし、それは常に(ドキュメントごとに)1つの大きなフラグメントを提供しますが、すべてのオカレンスを提供するわけではありません。

ありがとう、スティーブ

4

2 に答える 2

0

試してみて、いくつのフラグメントが得られるかを確認できますhl.fragsize=100hl.mergeContiguous=false

(solrconfig.xmlのSearchHandlerにパラメーターを直接追加する前に、クエリですべてのパラメーターを指定することにより、さまざまなオプションを試すことができます。満足のいくパラメーターのセットが見つかったら、solrconfigでそれらを使用してください。)

于 2013-02-20T15:22:20.440 に答える
0

興味があるかもしれないパッチhttp://issues.apache.org/jira/i#browse/LUCENE-5317を寄稿しました。Solrラッパーが進行中です。

于 2013-10-30T20:00:00.843 に答える