solr学习第八课程----MultiCore的配置方法(第二集)

2023-11-29 04:38

本文主要是介绍solr学习第八课程----MultiCore的配置方法(第二集),希望对大家解决编程问题提供一定的参考价值,需要的开发者们随着小编来一起学习吧!

solr学习第八课程分成两部分

1. solr学习第八课程----MultiCore的配置方法(第一集)

2. solr学习第八课程----MultiCore的配置方法(第二集)

 

solr学习第八课程----MultiCore的配置方法(第二集)内容目录

1. 验证多个core的情况

2. 如何通过solrj操作数据

具体内容

1. 验证多个core的情况下

第一步:Master的core0的访问管理界面

 

 

第二步:Slaver的core0的访问管理界面

 

 

第三步:Slaver的core0的索引复制管理界面

 

 

 

第四步:Master/Slave模式的主从索引架构如图

 

 

2. solrj操作数据代码

第一步:采用Maven方式集成solrj所需要的包

                 <dependency>
<groupId>org.apache.solr</groupId>
<artifactId>solr-solrj</artifactId>
<version>4.4.0</version>
</dependency>
<dependency>
<groupId>org.apache.http</groupId>
<artifactId>httpmime</artifactId>
<version>4.2.3</version>
</dependency>
<dependency>
<groupId>org.apache.http</groupId>
<artifactId>httpcore</artifactId>
<version>4.2.2</version>
</dependency>
<dependency>
<groupId>org.apache.http</groupId>
<artifactId>httpclient</artifactId>
<version>4.2.3</version>
</dependency>
<dependency>
<groupId>org.noggit</groupId>
<artifactId>noggit</artifactId>
<version>0.5</version>
</dependency>


 

第二步:通过单例模式创建获取solr服务类

package com.solr.common;
import org.apache.commons.logging.Log;
import org.apache.commons.logging.LogFactory;
import org.apache.solr.client.solrj.impl.HttpSolrServer;
public class SolrServer {
private static transient Log logger = LogFactory.getLog(SolrServer.class);
// solr服务地址连接-The URL of the Solr server.
private static final String baseURL = "http://192.168.17.128:9080/solr/core0";
// solr服务实例对象
private static HttpSolrServer server;
// 获取solr服务
public static synchronized HttpSolrServer getInstance() {
try {
if (server == null) {
logger.info("connect solrServer is start.....");
// 主机URLbaseURL - The URL of the Solr server. For example,
// " http://localhost:8983/solr/" if you are using the standard
// distribution Solr webapp on your local machine.
server = new HttpSolrServer(baseURL);
// 超时时间 Set SoTimeout (read timeout).
server.setSoTimeout(5000);
// 连接超时时间 HttpConnectionParams.setConnectionTimeout
server.setConnectionTimeout(1000);
// Set the maximum number of connections that can be open to a
// single host at any given time. If http client was created
// outside the operation is not allowed.
server.setDefaultMaxConnectionsPerHost(1000);
// 连接solr最大连接数 Set the maximum number of connections that can be
// open at any given time.
server.setMaxTotalConnections(100);
// // defaults to false,Configure whether the client should
// follow redirects or not.
server.setFollowRedirects(false);
// Server side must support gzip or deflate for this to have any
// effect.
server.setAllowCompression(true);
// 最大尝试连接次数-Set maximum number of retries to attempt in the
// event of transient errors.
server.setMaxRetries(3);
logger.info("connect solrServer success");
}
} catch (Exception e) {
logger.error("connect solr is exception,please retry it!", e);
}
return server;
}
public void destory() {
server = null;
System.runFinalization();
System.gc();
}
}


 

其中:http://192.168.17.128:9080/solr/core0根据需要给出指定的baseURL.

 

 

第三步:创建维护索引工具类

package com.solr.util;
import java.util.ArrayList;
import java.util.List;
import org.apache.commons.logging.Log;
import org.apache.commons.logging.LogFactory;
import org.apache.solr.client.solrj.impl.BinaryRequestWriter;
import org.apache.solr.client.solrj.impl.HttpSolrServer;
import org.apache.solr.client.solrj.response.QueryResponse;
import org.apache.solr.common.SolrDocumentList;
import org.apache.solr.common.SolrInputDocument;
import org.apache.solr.common.params.ModifiableSolrParams;
/**
* <p>
* solr服务器操作工具类
* </p>
* 
* @author shenfl
* @version V1.0
* 
* 
*/
public class SolrUtil {
private static transient Log logger = LogFactory.getLog(SolrUtil.class);
/**
* 添加或者更新索引
* 
* @param docs
* @param solr
*/
public static void addOrUpdate(List<SolrInputDocument> docs, HttpSolrServer solr) {
List<SolrInputDocument> docList = new ArrayList<SolrInputDocument>();
try {
for (int i = 0; i < docs.size(); i++) {
docList.add(docs.get(i));
solr.add(docList);
if (docList.size() % 100 == 0) {
solr.commit();
docList.clear();
}
}
solr.commit();
} catch (Exception e) {
logger.error(" addOrUpdate data to solr server is exception ", e);
e.printStackTrace();
}
}
/**
* 查询所有索引
* 
* @param solr
* @return
*/
public static SolrDocumentList query(HttpSolrServer solr) {
ModifiableSolrParams params = null;
SolrDocumentList documentList = null;
try {
params = new ModifiableSolrParams();
// Query String: *:*标识查询所有的数据库索引
params.set("q", "*:*");
// Start Row
params.set("start", 0);
// Maximum Rows Returned
params.set("rows", 10);
QueryResponse response = solr.query(params);
fail("query time:" + response.getQTime());
fail("Elapsed Time:" + response.getElapsedTime());
fail("status:" + response.getStatus());
documentList = response.getResults();
} catch (Exception e) {
logger.error(" query data to solr server is exception ", e);
}
return documentList;
}
/**
* 根据ID单个删除的索引:<delete><id>1403001</id></delete>
* 
* @param id
*/
public static void removeById(String id, HttpSolrServer solr) {
try {
solr.setRequestWriter(new BinaryRequestWriter());//提高性能采用流输出方式
solr.deleteById(id);
solr.commit();
if (logger.isDebugEnabled()) {
logger.debug("removeById id = " + id + " success");
}
} catch (Exception e) {
logger.error(" removeById data to solr server is exception ", e);
}
}
/**
* 批量删除多个ID的索引
* 
* @param ids
*/
public static void batchRemoveByIds(List<String> ids, HttpSolrServer solr) {
try {
solr.setRequestWriter(new BinaryRequestWriter());//提高性能采用流输出方式
solr.deleteById(ids);
solr.commit();
if (logger.isDebugEnabled()) {
logger.debug("batchRemoveByIds ids = " + ids.toString() + " success");
}
} catch (Exception e) {
logger.error(" batchRemoveByIds data to solr server is exception ", e);
}
}
/**
* 批量删除所有的索引
* 
* @param ids
*/
public static void batchRemove(HttpSolrServer solr) {
try {
solr.setRequestWriter(new BinaryRequestWriter());//提高性能采用流输出方式
solr.deleteByQuery("*:*");
solr.commit();
} catch (Exception e) {
logger.error(" batchRemove data to solr server is exception ", e);
}
}
public final static void fail(Object o) {
logger.info(o);
}
}


 

第四步:创建维护索引测试类

package com.solr.common;
import java.util.ArrayList;
import java.util.List;
import org.apache.solr.common.SolrDocument;
import org.apache.solr.common.SolrDocumentList;
import org.apache.solr.common.SolrInputDocument;
import org.junit.Test;
import com.solr.util.SolrUtil;
public class SolrUtilTest {
@Test
public void testAddDoc() {
List<SolrInputDocument> docs = new ArrayList<SolrInputDocument>();
SolrInputDocument solrDocument = new SolrInputDocument();
solrDocument.addField("id", "1000001");
solrDocument.addField("name", "shenfl40");
docs.add(solrDocument);
SolrUtil.addOrUpdate(docs, SolrServer.getInstance());
}
@Test
public void testQuery() {
SolrDocumentList solrDocumentList = null;
try {
solrDocumentList = SolrUtil.query(SolrServer.getInstance());
// 输出文档列表数据
for (SolrDocument doc : solrDocumentList) {
String info = doc.getFieldValue("id") + "," + doc.getFieldValue("name");
System.out.println("==>>" + info);//==>>1000001,shenfl40
}
} catch (Exception e) {
e.printStackTrace();
}
}
@Test
public void testClear(){
SolrUtil.batchRemove(SolrServer.getInstance());
}
public void testClear2(){
SolrUtil.removeById("1000000",SolrServer.getInstance() );
}
}


说明:testAddDoc生产索引,结果可以通过solr的管理界面查看,也可以通过代码testQuery查看。

 

 

 

solr学习第八课程分成两部分

1. solr学习第八课程----MultiCore的配置方法(第一集)

2. solr学习第八课程----MultiCore的配置方法(第二集)

这篇关于solr学习第八课程----MultiCore的配置方法(第二集)的文章就介绍到这儿,希望我们推荐的文章对编程师们有所帮助!



http://www.chinasem.cn/article/431477

相关文章

mybatis映射器配置小结

《mybatis映射器配置小结》本文详解MyBatis映射器配置,重点讲解字段映射的三种解决方案(别名、自动驼峰映射、resultMap),文中通过示例代码介绍的非常详细,对大家的学习或者工作具有一定... 目录select中字段的映射问题使用SQL语句中的别名功能使用mapUnderscoreToCame

python获取指定名字的程序的文件路径的两种方法

《python获取指定名字的程序的文件路径的两种方法》本文主要介绍了python获取指定名字的程序的文件路径的两种方法,文中通过示例代码介绍的非常详细,对大家的学习或者工作具有一定的参考学习价值,需要... 最近在做项目,需要用到给定一个程序名字就可以自动获取到这个程序在Windows系统下的绝对路径,以下

Linux下MySQL数据库定时备份脚本与Crontab配置教学

《Linux下MySQL数据库定时备份脚本与Crontab配置教学》在生产环境中,数据库是核心资产之一,定期备份数据库可以有效防止意外数据丢失,本文将分享一份MySQL定时备份脚本,并讲解如何通过cr... 目录备份脚本详解脚本功能说明授权与可执行权限使用 Crontab 定时执行编辑 Crontab添加定

JavaScript中的高级调试方法全攻略指南

《JavaScript中的高级调试方法全攻略指南》什么是高级JavaScript调试技巧,它比console.log有何优势,如何使用断点调试定位问题,通过本文,我们将深入解答这些问题,带您从理论到实... 目录观点与案例结合观点1观点2观点3观点4观点5高级调试技巧详解实战案例断点调试:定位变量错误性能分

Python中 try / except / else / finally 异常处理方法详解

《Python中try/except/else/finally异常处理方法详解》:本文主要介绍Python中try/except/else/finally异常处理方法的相关资料,涵... 目录1. 基本结构2. 各部分的作用tryexceptelsefinally3. 执行流程总结4. 常见用法(1)多个e

Java使用jar命令配置服务器端口的完整指南

《Java使用jar命令配置服务器端口的完整指南》本文将详细介绍如何使用java-jar命令启动应用,并重点讲解如何配置服务器端口,同时提供一个实用的Web工具来简化这一过程,希望对大家有所帮助... 目录1. Java Jar文件简介1.1 什么是Jar文件1.2 创建可执行Jar文件2. 使用java

SpringBoot 多环境开发实战(从配置、管理与控制)

《SpringBoot多环境开发实战(从配置、管理与控制)》本文详解SpringBoot多环境配置,涵盖单文件YAML、多文件模式、MavenProfile分组及激活策略,通过优先级控制灵活切换环境... 目录一、多环境开发基础(单文件 YAML 版)(一)配置原理与优势(二)实操示例二、多环境开发多文件版

Vite 打包目录结构自定义配置小结

《Vite打包目录结构自定义配置小结》在Vite工程开发中,默认打包后的dist目录资源常集中在asset目录下,不利于资源管理,本文基于Rollup配置原理,本文就来介绍一下通过Vite配置自定义... 目录一、实现原理二、具体配置步骤1. 基础配置文件2. 配置说明(1)js 资源分离(2)非 JS 资

MySQL8 密码强度评估与配置详解

《MySQL8密码强度评估与配置详解》MySQL8默认启用密码强度插件,实施MEDIUM策略(长度8、含数字/字母/特殊字符),支持动态调整与配置文件设置,推荐使用STRONG策略并定期更新密码以提... 目录一、mysql 8 密码强度评估机制1.核心插件:validate_password2.密码策略级

ShardingProxy读写分离之原理、配置与实践过程

《ShardingProxy读写分离之原理、配置与实践过程》ShardingProxy是ApacheShardingSphere的数据库中间件,通过三层架构实现读写分离,解决高并发场景下数据库性能瓶... 目录一、ShardingProxy技术定位与读写分离核心价值1.1 技术定位1.2 读写分离核心价值二