0

ファイルで定義されたストップワードを削除するメソッドを使用しています。これにより、このメソッドに渡すクエリ文字列からそれらの単語が切り取られます...コードは正常に動作しています

今私がする必要があるのは...クエリ文字列にそれらのストップワードだけが含まれている場合、それは取り除かれるべきではありません..

例: ストップワード ファイルに「is」「was」「and」がある場合

クエリが「私は学生でした」の場合、出力は「私は学生です」となるはずです

しかし、クエリが「and is」の場合、「and is」と同じ出力が必要です。

以下は、ストップワードを削除するために私が書いた方法です。

public static String removeStopWords(String  query) throws UnsupportedEncodingException
    {
      String []queryTerms = query.split("&");
      String queryString="";
      StringBuffer sb =new StringBuffer();
      for (int i=0;i<queryTerms.length;i++){
            if(queryTerms[i].startsWith("q=") && !queryTerms[i].startsWith("q.orig")){
                queryString = queryTerms[i].replaceAll("q=","").trim().replace("+"," ").replaceAll("\\s+"," ").trim();
                }

        }
      if(!queryString.equalsIgnoreCase("")) {
      String [] tokens=queryString.split("\\s+");
      List lStopWords=StopWordDataLoad.getlQueryStringStopword();
      List<String> lTokens=new ArrayList<String>();
      boolean noStopWord=false;
      for(String s: tokens)
        if(!lStopWords.contains(s)) {
              if(sb.length()==0) sb.append(s);
                  else sb.append(" ").append(s);
          } else noStopWord=true;

       queryString=sb.toString().replaceAll("\\s+", " ");
       if(queryString.equalsIgnoreCase("") || noStopWord ==false) return query;
      }
      else return query;


      String fque="";
      String finQue = "";
      ArrayList<String> list = new ArrayList<String>();
      for (int i=0;i<queryTerms.length;i++){
          if(queryTerms[i].startsWith("q=") && !queryTerms[i].startsWith("q.orig")){
              fque = "q="+URLEncoder.encode(queryString,PropertyLoader.getHttpEncoding());
              list.add(fque);

          } else if (!queryTerms[i].equalsIgnoreCase("")) list.add(queryTerms[i]);
      }
      ListIterator<String> iter = list.listIterator();
        while(iter.hasNext()){
            String str = iter.next();
            finQue=finQue+"&"+str;
        }


      return finQue.trim();

    }
4

1 に答える 1

2

最後の行を次のように変更するだけです。

String result = finQue.trim();
if (result.equals("")) {
    return query;
} else {
    return result;
}
于 2011-08-23T06:38:17.340 に答える