solr4.7开发实践 2——高亮显示

2019-03-27 01:21|来源: 网路

  1. 第一种方式是solrj操作:

 
public SolrDocumentList query(String str) {
    SolrQuery query = new SolrQuery(str);
    
    query.setHighlight(true);//开启高亮功能  

    query.addHighlightField("name,content");//高亮字段  :多个域可以用空格或者逗号分隔
    query.setHighlightSimplePre("<font color=red >");//渲染标签  
    query.setHighlightSimplePost("</font>");//渲染标签  
    query.setParam("f.content.hl.fragsize", "200");

    
    QueryResponse qr=server.query(query);//执行查询  
    SolrDocumentList dlist=qr.getResults();  
    
    System.out.println("总数:"+dlist.getNumFound());
    //第一个Map的键是文档的ID,第二个Map的键是高亮显示的字段名    
    Map<String, Map<String, List<String>>> map = qr.getHighlighting();    
    for(int i=0;i<dlist.size();i++){  
     SolrDocument d=dlist.get(i);//获取每一个document  

     
     Map<String, String> mapRe = new HashMap<String, String>();
     mapRe.put("id", d.get("id").toString());
     if(map.get(d.get("id")).get("name") == null){
      mapRe.put("name", d.getFieldValue("name").toString()+"--"+d.getFieldValue("author").toString()+"-"+d.getFieldValue("theme"));
     }else{
      mapRe.put("name", map.get(d.get("id")).get("name").toString()+"--"+d.getFieldValue("author").toString()+"-"+d.getFieldValue("theme"));
     }
     if(map.get(d.get("id")).get("content") == null){
      mapRe.put("content", d.getFieldValue("content").toString().substring(0,200));
     }else{
      mapRe.put("content", map.get(d.get("id")).get("content").toString());
     }
     list.add(mapRe);
    }     
    return list;
}

2 ) 另外的方法,配置solrconfig.xml

solr是在lucene的基础上做的开发,那么在某些功能的实现上,与lucene也会有相似之处。
solr的高亮显示(包括自动摘要),是通过hl这个param,以及其相关变量来实现的,hl是hightlight的简写。lucene中是通过highlighter来操作高亮和摘要的。
 
配置高亮的相关属性,是在solrconfig.xml中配置的。在 <requestHandler name="search" class="solr.SearchHandler" default="true">下进行配置。solrconfig.xml文件中包含多个requestHandler的标签,但是只有在上述的名为search的标签中配置才有效。现将配置的案列公布如下:

 <requestHandler name="search" class="solr.SearchHandler" default="true">
    <!-- default values for query parameters can be specified, these
         will be overridden by parameters in the request
      -->
     <lst name="defaults">
       <str name="echoParams">explicit</str>
       <int name="rows">10</int>
       <str name="df">text</str>
        <str name="hl">true</str>
        <str name="hl.fl">content</str>
        <str name="f.name.hl.fragsize">50</str>
        <str name="hl.simple.pre">&lt;font color=&quot;red&gt;</str>
        <str name="hl.simple.post">&lt;/font&gt;</str>
     </lst>
  </requestHandler>

其中,hl是指定是否使用高亮;hl.fl,指定对哪些域进行高亮,对多个域进行高亮的话,好像是用逗号隔开;f.name.hl.fragsize是指摘要的长度,默认0代表不做摘要。而hl.simple.pre和hl.simple.post则是指定高亮时显示的格式,默认是<em></em>。详细内容请参见:http://wiki.apache.org/solr/HighlightingParameters。设置完成后,

在solrj中,通过QueryResponse对象的getHighlighting()方法获得。该方法返回 Map<String,Map<String,List<String>>>类型的数据。其中第一个Map中的key是id,第二个Map中的key是field,List<String>中封装的就是高亮与摘要处理过后的内容了


 Map<String, Map<String, List<String>>> map = response.getHighlighting();
 
 通过这个api的方法就可以得到高亮的内容,高亮的内容通过 key 跟索引的document部分关联起来
 
 这个key就是document 的id
参数详细说明:

1.hl.fl: 用空格或逗号隔开的字段列表。要启用某个字段的highlight功能,就得保证该字段在schema中是stored。如果该参数未被给出,那么就会高亮默认字段 standard handler会用df参数,dismax字段用qf参数。你可以使用星号去方便的高亮所有字段。如果你使用了通配符,那么要考虑启用hl.requiredFieldMatch选项。
 2.hl.requireFieldMatch: 
如果置为true,除非该字段的查询结果不为空才会被高亮。它的默认值是false,意味着它可能匹配某个字段却高亮一个不同的字段。如果hl.fl使用了通配符,那么就要启用该参数。尽管如此,如果你的查询是all字段(可能是使用copy-field 指令),那么还是把它设为false,这样搜索结果能表明哪个字段的查询文本未被找到
 3.hl.usePhraseHighlighter: 
如果一个查询中含有短语(引号框起来的)那么会保证一定要完全匹配短语的才会被高亮。
 4.hl.highlightMultiTerm 
如果使用通配符和模糊搜索,那么会确保与通配符匹配的term会高亮。默认为false,同时hl.usePhraseHighlighter要为true。
 5.hl.snippets: 
这是highlighted片段的最大数。默认值为1,也几乎不会修改。如果某个特定的字段的该值被置为0(如f.allText.hl.snippets=0),这就表明该字段被禁用高亮了。你可能在hl.fl=*时会这么用。
 6.hl.fragsize: 
每个snippet返回的最大字符数。默认是100.如果为0,那么该字段不会被fragmented且整个字段的值会被返回。大字段时不会这么做。
 7.hl.mergeContiguous: 
如果被置为true,当snippet重叠时会merge起来。
 8.hl.maxAnalyzedChars: 
会搜索高亮的最大字符,默认值为51200,如果你想禁用,设为-1
 9.hl.alternateField: 
如果没有生成snippet(没有terms 匹配),那么使用另一个字段值作为返回。
 10.hl.maxAlternateFieldLength: 
如果hl.alternateField启用,则有时需要制定alternateField的最大字符长度,默认0是即没有限制。所以合理的值是应该为:hl.snippets * hl.fragsize这样返回结果的大小就能保持一致。
 12.hl.formatter:一个提供可替换的formatting算法的扩展点。默认值是simple,这是目前仅有的选项。显然这不够用,你可以看看org.apache.solr.highlight.HtmlFormatter.java 和 solrconfig.xml中highlighting元素是如何配置的。 
注意在不论原文中被高亮了什么值的情况下,如预先已存在的em tags,也不会被转义,所以在有时会导致假的高亮。
 13.hl.fragmenter: 
这个是solr制定fragment算法的扩展点。gap是默认值。regex是另一种选项,这种选项指明highlight的边界由一个正则表达式确定。这是一种非典型的高级选项。为了知道默认设置和fragmenters (and formatters)是如何配置的,可以看看solrconfig.xml中的highlight段。 
regex 的fragmenter有如下选项:
 14.hl.regex.pattern:正则表达式的pattern
15.hl.regex.slop:这是hl.fragsize能变化以适应正则表达式的因子。默认值是0.6,意思是如果hl.fragsize=100那么fragment的大小会从40-160.


转自:http://my.oschina.net/MrMichael/blog/226012

相关问答

更多
  • 您好,您这样: 1 @Test 2 public void test5(){ 3 try { 4 SolrQuery query=new SolrQuery("程序"); 5 query.setHighlight(true) 6 .setHighlightSimplePre("")//设置开头 7 .setHighlightSimplePost("") //设置结尾 8 .setStart(0) 9 .setRows...
  • hl.fl: 用空格或逗号隔开的字段列表。要启用某个字段的highlight功能,就得保证该字段在schema中是stored。如果该参数未被给出,那么就会高亮默认字段 standard handler会用df参数,dismax字段用qf参数。你可以使用星号去方便的高亮所有字段。 1 @Test 2 public void test5(){ 3 try { 4 SolrQuery query=new SolrQuery("程序"); 5 query.setHighlight(true) 6 .setHigh ...
  • 1 @Test 2 public void test5(){ 3 try { 4 SolrQuery query=new SolrQuery("程序"); 5 query.setHighlight(true) 6 .setHighlightSimplePre("")//设置开头 7 .setHighlightSimplePost("") //设置结尾 8 .setStart(0) 9 .setRows(10);//设置行数 10 //设置高亮的哪些区域 11 query.setParam("hl.fl", ...
  • 重启,大功告成随便检索一个词,看看是不是结果后面多了一个尾巴? 像这样的: Standards Based Open Interfaces - XML and HTTP Scalability - Efficient Replication to other Solr Search Servers Flexible and Adaptable with XML configuration and Schema SOLR1000 刚开始这种怪异的表现方式很不合我的胃口,为什么不把高亮标示直接标示到结果中呢? ...
  • 从配置上看,没有什么特别的问题,如果现在你是搜索什么词都高亮了,那可能是有两方面的原因. 1.你的hl.fl设置,你的那些词在所设置的字段里都存在 2.你的hl.requireFieldMatch=false设置.这个设置是有点模糊匹配高亮的意思,把这个设置为true试试
  • 电话应该是 == Asciidoctor.convert(@article.content, safe: 'safe') 要么 == Asciidoctor.render(@article.content, safe: 'safe') 然后,您将看到代码块内容上标记的样式。 如果这不起作用,也会改变 [source,ruby] 至 [source,ruby,role="my_css_class"] html角色属性的具体值似乎并不重要。 The call should be either == As ...
  • 问题是,当你使用edgengramfilter索引cards时,你会得到令牌c , ca , car , card和cards 。 当你搜索cars并且你有相同的edgengramfilter的时候,你会ll search for any document matching any of the tokens c , ca , car , and cars ll search for any document matching any of the tokens 。 解决方法是在索引时删除edgengram ...
  • 我建议尝试构建时间分析器 ,看看是否有特定的东西会降低编译器的速度。 根据我的经验,主要问题是复杂的类型推断,通常来自多个链式.maps,复杂的关联类型和泛型。 Swift编译器做得更多,并且比Objective-C编译器更新一些,所以它不太可能在相当长的一段时间内保持稳定/快速。 我知道编译时间和IDE稳定性是他们意识到的问题并且正在努力改进。 希望现在我们已经(承诺)源代码兼容性,这些东西将会在明年内得到很大改善。 不幸的是,在那之前我们可能不得不跳过一些箍。 In this case it had s ...
  • 正则表达式绝对是最开始的第一位。 然而,他们无法真正应对在大多数语言中遇到的许多边缘情况 - 看起来像关键字的文本可以在找到的字符串文字中,而字符串文字又可以包含转义的分隔符以及特殊字符。 同样的事情发表意见等。 基本上,要做好语法突出显示,您需要对源文件进行解析 - 使用特定于语言的启发式应用程序解析该文件以构建区域列表,其中源文件的每个区域都注明了它的样式。 随着编辑的进行,您可以再次应用语言规则来查看此更改能够在多大程度上改变区域的显示。 例如,在字符串文字中输入一个字母只会使字符串文字区域变长,但输 ...
  • 尝试编辑/etc/mime.types文件并添加那些“text / x - ????”条目: text/x-ruby-source rhtml html.erb erb text/x-eruby rjs text/x-yaml yml yaml Try to edit your /etc/mime ...