solr学习第八课程----MultiCore的配置方法(第二集)

2023-11-29 04:38

本文主要是介绍solr学习第八课程----MultiCore的配置方法(第二集),希望对大家解决编程问题提供一定的参考价值,需要的开发者们随着小编来一起学习吧!

solr学习第八课程分成两部分

1. solr学习第八课程----MultiCore的配置方法(第一集)

2. solr学习第八课程----MultiCore的配置方法(第二集)

 

solr学习第八课程----MultiCore的配置方法(第二集)内容目录

1. 验证多个core的情况

2. 如何通过solrj操作数据

具体内容

1. 验证多个core的情况下

第一步:Master的core0的访问管理界面

 

 

第二步:Slaver的core0的访问管理界面

 

 

第三步:Slaver的core0的索引复制管理界面

 

 

 

第四步:Master/Slave模式的主从索引架构如图

 

 

2. solrj操作数据代码

第一步:采用Maven方式集成solrj所需要的包

                 <dependency>
<groupId>org.apache.solr</groupId>
<artifactId>solr-solrj</artifactId>
<version>4.4.0</version>
</dependency>
<dependency>
<groupId>org.apache.http</groupId>
<artifactId>httpmime</artifactId>
<version>4.2.3</version>
</dependency>
<dependency>
<groupId>org.apache.http</groupId>
<artifactId>httpcore</artifactId>
<version>4.2.2</version>
</dependency>
<dependency>
<groupId>org.apache.http</groupId>
<artifactId>httpclient</artifactId>
<version>4.2.3</version>
</dependency>
<dependency>
<groupId>org.noggit</groupId>
<artifactId>noggit</artifactId>
<version>0.5</version>
</dependency>


 

第二步:通过单例模式创建获取solr服务类

package com.solr.common;
import org.apache.commons.logging.Log;
import org.apache.commons.logging.LogFactory;
import org.apache.solr.client.solrj.impl.HttpSolrServer;
public class SolrServer {
private static transient Log logger = LogFactory.getLog(SolrServer.class);
// solr服务地址连接-The URL of the Solr server.
private static final String baseURL = "http://192.168.17.128:9080/solr/core0";
// solr服务实例对象
private static HttpSolrServer server;
// 获取solr服务
public static synchronized HttpSolrServer getInstance() {
try {
if (server == null) {
logger.info("connect solrServer is start.....");
// 主机URLbaseURL - The URL of the Solr server. For example,
// " http://localhost:8983/solr/" if you are using the standard
// distribution Solr webapp on your local machine.
server = new HttpSolrServer(baseURL);
// 超时时间 Set SoTimeout (read timeout).
server.setSoTimeout(5000);
// 连接超时时间 HttpConnectionParams.setConnectionTimeout
server.setConnectionTimeout(1000);
// Set the maximum number of connections that can be open to a
// single host at any given time. If http client was created
// outside the operation is not allowed.
server.setDefaultMaxConnectionsPerHost(1000);
// 连接solr最大连接数 Set the maximum number of connections that can be
// open at any given time.
server.setMaxTotalConnections(100);
// // defaults to false,Configure whether the client should
// follow redirects or not.
server.setFollowRedirects(false);
// Server side must support gzip or deflate for this to have any
// effect.
server.setAllowCompression(true);
// 最大尝试连接次数-Set maximum number of retries to attempt in the
// event of transient errors.
server.setMaxRetries(3);
logger.info("connect solrServer success");
}
} catch (Exception e) {
logger.error("connect solr is exception,please retry it!", e);
}
return server;
}
public void destory() {
server = null;
System.runFinalization();
System.gc();
}
}


 

其中:http://192.168.17.128:9080/solr/core0根据需要给出指定的baseURL.

 

 

第三步:创建维护索引工具类

package com.solr.util;
import java.util.ArrayList;
import java.util.List;
import org.apache.commons.logging.Log;
import org.apache.commons.logging.LogFactory;
import org.apache.solr.client.solrj.impl.BinaryRequestWriter;
import org.apache.solr.client.solrj.impl.HttpSolrServer;
import org.apache.solr.client.solrj.response.QueryResponse;
import org.apache.solr.common.SolrDocumentList;
import org.apache.solr.common.SolrInputDocument;
import org.apache.solr.common.params.ModifiableSolrParams;
/**
* <p>
* solr服务器操作工具类
* </p>
* 
* @author shenfl
* @version V1.0
* 
* 
*/
public class SolrUtil {
private static transient Log logger = LogFactory.getLog(SolrUtil.class);
/**
* 添加或者更新索引
* 
* @param docs
* @param solr
*/
public static void addOrUpdate(List<SolrInputDocument> docs, HttpSolrServer solr) {
List<SolrInputDocument> docList = new ArrayList<SolrInputDocument>();
try {
for (int i = 0; i < docs.size(); i++) {
docList.add(docs.get(i));
solr.add(docList);
if (docList.size() % 100 == 0) {
solr.commit();
docList.clear();
}
}
solr.commit();
} catch (Exception e) {
logger.error(" addOrUpdate data to solr server is exception ", e);
e.printStackTrace();
}
}
/**
* 查询所有索引
* 
* @param solr
* @return
*/
public static SolrDocumentList query(HttpSolrServer solr) {
ModifiableSolrParams params = null;
SolrDocumentList documentList = null;
try {
params = new ModifiableSolrParams();
// Query String: *:*标识查询所有的数据库索引
params.set("q", "*:*");
// Start Row
params.set("start", 0);
// Maximum Rows Returned
params.set("rows", 10);
QueryResponse response = solr.query(params);
fail("query time:" + response.getQTime());
fail("Elapsed Time:" + response.getElapsedTime());
fail("status:" + response.getStatus());
documentList = response.getResults();
} catch (Exception e) {
logger.error(" query data to solr server is exception ", e);
}
return documentList;
}
/**
* 根据ID单个删除的索引:<delete><id>1403001</id></delete>
* 
* @param id
*/
public static void removeById(String id, HttpSolrServer solr) {
try {
solr.setRequestWriter(new BinaryRequestWriter());//提高性能采用流输出方式
solr.deleteById(id);
solr.commit();
if (logger.isDebugEnabled()) {
logger.debug("removeById id = " + id + " success");
}
} catch (Exception e) {
logger.error(" removeById data to solr server is exception ", e);
}
}
/**
* 批量删除多个ID的索引
* 
* @param ids
*/
public static void batchRemoveByIds(List<String> ids, HttpSolrServer solr) {
try {
solr.setRequestWriter(new BinaryRequestWriter());//提高性能采用流输出方式
solr.deleteById(ids);
solr.commit();
if (logger.isDebugEnabled()) {
logger.debug("batchRemoveByIds ids = " + ids.toString() + " success");
}
} catch (Exception e) {
logger.error(" batchRemoveByIds data to solr server is exception ", e);
}
}
/**
* 批量删除所有的索引
* 
* @param ids
*/
public static void batchRemove(HttpSolrServer solr) {
try {
solr.setRequestWriter(new BinaryRequestWriter());//提高性能采用流输出方式
solr.deleteByQuery("*:*");
solr.commit();
} catch (Exception e) {
logger.error(" batchRemove data to solr server is exception ", e);
}
}
public final static void fail(Object o) {
logger.info(o);
}
}


 

第四步:创建维护索引测试类

package com.solr.common;
import java.util.ArrayList;
import java.util.List;
import org.apache.solr.common.SolrDocument;
import org.apache.solr.common.SolrDocumentList;
import org.apache.solr.common.SolrInputDocument;
import org.junit.Test;
import com.solr.util.SolrUtil;
public class SolrUtilTest {
@Test
public void testAddDoc() {
List<SolrInputDocument> docs = new ArrayList<SolrInputDocument>();
SolrInputDocument solrDocument = new SolrInputDocument();
solrDocument.addField("id", "1000001");
solrDocument.addField("name", "shenfl40");
docs.add(solrDocument);
SolrUtil.addOrUpdate(docs, SolrServer.getInstance());
}
@Test
public void testQuery() {
SolrDocumentList solrDocumentList = null;
try {
solrDocumentList = SolrUtil.query(SolrServer.getInstance());
// 输出文档列表数据
for (SolrDocument doc : solrDocumentList) {
String info = doc.getFieldValue("id") + "," + doc.getFieldValue("name");
System.out.println("==>>" + info);//==>>1000001,shenfl40
}
} catch (Exception e) {
e.printStackTrace();
}
}
@Test
public void testClear(){
SolrUtil.batchRemove(SolrServer.getInstance());
}
public void testClear2(){
SolrUtil.removeById("1000000",SolrServer.getInstance() );
}
}


说明:testAddDoc生产索引,结果可以通过solr的管理界面查看,也可以通过代码testQuery查看。

 

 

 

solr学习第八课程分成两部分

1. solr学习第八课程----MultiCore的配置方法(第一集)

2. solr学习第八课程----MultiCore的配置方法(第二集)

这篇关于solr学习第八课程----MultiCore的配置方法(第二集)的文章就介绍到这儿,希望我们推荐的文章对编程师们有所帮助!


原文地址:
本文来自互联网用户投稿,该文观点仅代表作者本人,不代表本站立场。本站仅提供信息存储空间服务,不拥有所有权,不承担相关法律责任。如若转载,请注明出处:http://www.chinasem.cn/article/431477

相关文章

SpringBoot线程池配置使用示例详解

《SpringBoot线程池配置使用示例详解》SpringBoot集成@Async注解,支持线程池参数配置(核心数、队列容量、拒绝策略等)及生命周期管理,结合监控与任务装饰器,提升异步处理效率与系统... 目录一、核心特性二、添加依赖三、参数详解四、配置线程池五、应用实践代码说明拒绝策略(Rejected

SQL中如何添加数据(常见方法及示例)

《SQL中如何添加数据(常见方法及示例)》SQL全称为StructuredQueryLanguage,是一种用于管理关系数据库的标准编程语言,下面给大家介绍SQL中如何添加数据,感兴趣的朋友一起看看吧... 目录在mysql中,有多种方法可以添加数据。以下是一些常见的方法及其示例。1. 使用INSERT I

Python中反转字符串的常见方法小结

《Python中反转字符串的常见方法小结》在Python中,字符串对象没有内置的反转方法,然而,在实际开发中,我们经常会遇到需要反转字符串的场景,比如处理回文字符串、文本加密等,因此,掌握如何在Pyt... 目录python中反转字符串的方法技术背景实现步骤1. 使用切片2. 使用 reversed() 函

Python中将嵌套列表扁平化的多种实现方法

《Python中将嵌套列表扁平化的多种实现方法》在Python编程中,我们常常会遇到需要将嵌套列表(即列表中包含列表)转换为一个一维的扁平列表的需求,本文将给大家介绍了多种实现这一目标的方法,需要的朋... 目录python中将嵌套列表扁平化的方法技术背景实现步骤1. 使用嵌套列表推导式2. 使用itert

Python使用pip工具实现包自动更新的多种方法

《Python使用pip工具实现包自动更新的多种方法》本文深入探讨了使用Python的pip工具实现包自动更新的各种方法和技术,我们将从基础概念开始,逐步介绍手动更新方法、自动化脚本编写、结合CI/C... 目录1. 背景介绍1.1 目的和范围1.2 预期读者1.3 文档结构概述1.4 术语表1.4.1 核

在Linux中改变echo输出颜色的实现方法

《在Linux中改变echo输出颜色的实现方法》在Linux系统的命令行环境下,为了使输出信息更加清晰、突出,便于用户快速识别和区分不同类型的信息,常常需要改变echo命令的输出颜色,所以本文给大家介... 目python录在linux中改变echo输出颜色的方法技术背景实现步骤使用ANSI转义码使用tpu

Conda与Python venv虚拟环境的区别与使用方法详解

《Conda与Pythonvenv虚拟环境的区别与使用方法详解》随着Python社区的成长,虚拟环境的概念和技术也在不断发展,:本文主要介绍Conda与Pythonvenv虚拟环境的区别与使用... 目录前言一、Conda 与 python venv 的核心区别1. Conda 的特点2. Python v

Spring Boot中WebSocket常用使用方法详解

《SpringBoot中WebSocket常用使用方法详解》本文从WebSocket的基础概念出发,详细介绍了SpringBoot集成WebSocket的步骤,并重点讲解了常用的使用方法,包括简单消... 目录一、WebSocket基础概念1.1 什么是WebSocket1.2 WebSocket与HTTP

SQL Server配置管理器无法打开的四种解决方法

《SQLServer配置管理器无法打开的四种解决方法》本文总结了SQLServer配置管理器无法打开的四种解决方法,文中通过图文示例介绍的非常详细,对大家的学习或者工作具有一定的参考学习价值,需要的... 目录方法一:桌面图标进入方法二:运行窗口进入检查版本号对照表php方法三:查找文件路径方法四:检查 S

MyBatis-Plus 中 nested() 与 and() 方法详解(最佳实践场景)

《MyBatis-Plus中nested()与and()方法详解(最佳实践场景)》在MyBatis-Plus的条件构造器中,nested()和and()都是用于构建复杂查询条件的关键方法,但... 目录MyBATis-Plus 中nested()与and()方法详解一、核心区别对比二、方法详解1.and()