| 注册
请输入搜索内容

热门搜索

Java Linux MySQL PHP JavaScript Hibernate jQuery Nginx
jopen
11年前发布

Lucene中的动态摘要

Lucene扩展中有一个HighLighter自动摘要的包。

通过调用:getBestFragments 返回一个或多个和搜索关键词最相关的段落。

Fragmenter 把文本分成多个段落。

QueryScorer 计算每个段落的分值。QueryScorer只应该包含需要做高量显示的Term。

TokenStream 通 过IndexReader中的位置信息来返回一个TokenStream,而不要再次分词处理原文后返回TokenStream。如果 IndexReader中的Token位置有重叠,为了把冗余的Token去掉,TokenStream计算起来会麻烦一些。

Highlighter highlighter =new Highlighter(this,new QueryScorer(query));    highlighter.setTextFragmenter(new SimpleFragmenter(40));    for (int i = 0; i < hits.length(); i++)    {     String text = hits.doc(i).get(FIELD_NAME);     int maxNumFragmentsRequired = 2;     String fragmentSeparator = "...";     TermPositionVector tpv = (TermPositionVector)reader.getTermFreqVector(hits.id(i),FIELD_NAME);     TokenStream tokenStream=TokenSources.getSingleTokenStream(tpv,true);     String result =highlighter.getBestFragment(tokenStream,text);     System.out.println("\t" + result);    }

 本文由用户 jopen 自行上传分享,仅供网友学习交流。所有权归原作者,若您的权利被侵害,请联系管理员。
 转载本站原创文章,请注明出处,并保留原始链接、图片水印。
 本站是一个以用户分享为主的开源技术平台,欢迎各类分享!
 本文地址:https://www.open-open.com/lib/view/open1387176481671.html
Lucene 搜索引擎