博客
关于我
强烈建议你试试无所不能的chatGPT,快点击我
solr 请求参数过长报错,Solr配置maxBooleanClauses属性不生效原因分析
阅读量:7220 次
发布时间:2019-06-29

本文共 2067 字,大约阅读时间需要 6 分钟。

博客分类: 

 

上次已经写过一篇关于solr中,查询条件过多的异常的,这次在总结扩展一下: 

有时候我们的查询条件会非常多,由于solr的booleanquery默认设置的条件数为1024,所以超过这个限制的 
会报异常,这样设置的原因是为了限制过多条件查询,降低查询的性能,但有时候又必须这样查,或分析数据用, 
所以可以临时改变下,修改方法: 
修改solrconfig.xml文件: 

 http://www.dotdy.com/

Java代码  
  1. <maxBooleanClauses>20000</maxBooleanClauses>  

理想情况下,配置完这个属性,重启应该就生效了,但是让你意外的是,并没有生效,拼接5000个查询条件,依然报这个异常: 

Java代码  
  1. too many boolean clauses Exception  

为什么? 仔细看solr的文档里面,写这下面一段话: 

Java代码  
  1.    
  2. Max Boolean Clauses  
  3.   
  4.          Maximum number of clauses in each BooleanQuery,  an exception  
  5.          is thrown if exceeded.  
  6.   
  7.          ** WARNING **  
  8.   
  9.          This option actually modifies a global Lucene property that  
  10.          will affect all SolrCores.  If multiple solrconfig.xml files  
  11.          disagree on this property, the value at any given moment will  
  12.          be based on the last SolrCore to be initialized.  

什么意思?大致就是说,这个属性是全局的lucene配置,如果你的solr里面存在多个core,那么必须多个core的配置 
文件都得配置maxBooleanClauses才会生效,否则只有当你配置的那个core最后一个被加载时,它才会生效,如果不幸,不是最后一个加载,那么即使你设置成20000那么它默认还是1024,这就是为什么配置完成之后依旧不生效的原因,散仙的场景中,参数大概有8000多个,虽然改变配置可以查询,但不建议这么用,内存不给力的情况下,查询速度非常之慢,用于离线分析某些数据,倒还可以接受。 
 http://www.iskdy.com/
最后在补充一些查询知识: 

Java代码  
  1. //过滤的几种写法  
  2.  (1)q=category:1 AND category:2 AND category:3 ... AND category:2000  
  3. 2)q=*:*&fq=category:(3 ... 2000)  
  4. 3)q=*:*&fq=category:1&fq=category:2&fq=category:3&....&fq=category:2000  

 

 

       在solr请求的参数中,我们一般情况下是不会有太多的参数,有一种情况会有很多,就是有关联关系的时候,查出来了一个ids的集合,然后传给你的solr当参数,这个时候,你的参数就可能会报长度错误。如果没有报,那只能说明你的长度还不够长。

       接下来介绍如何解决长度问题。
       1.在solr的实例中有一个conf的文件solrconfig.xml文件中 在<query>的标签下有一个<maxBooleanClauses>1024</maxBooleanClauses>这个时候,你修改这个1024就可以,有些人修改完事了,重启了solr但是没有起效,原因:实例core有多个,但是你只修改了这一个,当solr在加载的时候,只会按照最后一个设置的值做标准。它的标准是最后加载的一个core实例的maxBooleanClauses值。(当你修改这个配置的时候,自己读一下修改位置上面被注释掉的文字)
      2.(这个是第二天来补充的,不和上面是一起写的),虽然你的solr配置没问题,但是你的tomcat并不能接收那么多的参数,所以需要修改tomcat的conf/server.xml文件  <Connector connectionTimeout="20000" port="8088" protocol="HTTP/1.1" redirectPort="8443" maxHttpHeaderSize=""/> maxHttpHeaderSize的属性就是请求头的大小设置。

 

 

把请求模式改成post模式, QueryResponse qr = solr.query(this.getSolrQuery(ids));改成

 

QueryResponse qr = solr.query(this.getSolrQuery(ids),METHOD.POST);

 

总结: 
(1)如果是or操作多个条件,只能配置最大限制条件 
(2)如果是and操作多个条件,可以上面的3方法,而不用配置最大限制条件

 

转载地址:http://thqym.baihongyu.com/

你可能感兴趣的文章
Java 科学计数法转成完整数字展示;double类型小数值不准确处理
查看>>
PHP代码补全(提示)中的两个 Atom 插件的对比
查看>>
C语言之流程控制
查看>>
ElasticSearch ik,elasticsearch-jdbc 使用 和 yii2 实例
查看>>
RPA视频教程丨UiBot—Function函数详解
查看>>
Getinstall如何解决下载一app 点击浏览器就变成一二微码
查看>>
我的友情链接
查看>>
Windows Server 2008 RemoteApp(五)---远程桌面Web访问
查看>>
linux C函数之strdup函数分析
查看>>
GHOST系统部分报错解决方法
查看>>
我的友情链接
查看>>
数据库与java程序数据传递过程中日期类型的转换
查看>>
改掉阻碍晋升的7个坏毛病 走通职场晋升路
查看>>
Hyper-V——snapshot虚拟机快照
查看>>
Android实现弹出Toast提示
查看>>
Ubuntu12.04平台安装cacti全过程(二)
查看>>
存储过程的具体操作
查看>>
CentOS7修改网卡名称
查看>>
C++拓展笔记1-3:浅析C++关键字const的几个作用
查看>>
免费的编程中文书籍索引
查看>>