ES2.x版本的javaAPI使用实例

2024-02-20 06:38
文章标签 java 使用 实例 api 版本 es2

本文主要是介绍ES2.x版本的javaAPI使用实例,希望对大家解决编程问题提供一定的参考价值,需要的开发者们随着小编来一起学习吧!

前段时间做用户标签系统,使用的es2.2来存储查询。其中涉及到了es的javaAPI的使用。这里把笨小葱用到的一些函数分享一下。

首先是es的连接获取操作实例。


import org.elasticsearch.action.search.SearchResponse;
import org.elasticsearch.client.transport.TransportClient;
import org.elasticsearch.common.settings.Settings;
import org.elasticsearch.common.transport.InetSocketTransportAddress;
import org.elasticsearch.index.query.QueryBuilders;
import org.elasticsearch.search.aggregations.AggregationBuilders;
import org.elasticsearch.search.sort.SortOrder;import java.net.InetAddress;
import java.net.UnknownHostException;/*** Created by cc on 2016/4/4.*/
public class Es_Client {public static final String CLUSTER_NAME = "razor_es"; //实例名称private static final String IP = "192.168.1.1";private static final int PORT = 9300;  //端口//1.设置集群名称:默认是elasticsearch,并设置client.transport.sniff为true,使客户端嗅探整个集群状态,把集群中的其他机器IP加入到客户端//对ES2.0有效private static Settings settings = Settings.settingsBuilder().put("cluster.name", CLUSTER_NAME).put("client.transport.sniff", true).build();//创建私有对象private static TransportClient client;static {try {client = TransportClient.builder().settings(settings).build().addTransportAddress(new InetSocketTransportAddress(InetAddress.getByName(IP), PORT));} catch (UnknownHostException e) {e.printStackTrace();}}//取得实例public static  TransportClient getTransportClient() {return client;}}




然后是一些函数操作:


import com.tesla.razor.dao.TagDAO;
import com.tesla.razor.util.Es_Client;
import net.sf.json.JSONArray;
import net.sf.json.JSONObject;
import org.elasticsearch.action.get.GetResponse;
import org.elasticsearch.action.search.SearchResponse;
import org.elasticsearch.index.query.BoolQueryBuilder;
import org.elasticsearch.index.query.QueryBuilders;
import org.elasticsearch.search.SearchHit;
import org.elasticsearch.search.aggregations.AggregationBuilders;
import org.elasticsearch.search.sort.SortOrder;import java.util.ArrayList;
import java.util.List;public class TagDAOimpl implements TagDAO {@Overridepublic JSONObject getUserInfoList(String productid, String startdate, String stopdate) throws Exception {BoolQueryBuilder boolQueryBuilder = QueryBuilders.boolQuery();boolQueryBuilder.must(QueryBuilders.matchQuery("product_id", productid));boolQueryBuilder.must(QueryBuilders.rangeQuery("localtime").from(startdate).to(stopdate));SearchResponse response = Es_Client.getTransportClient().prepareSearch("razor_cd").setTypes("clientdata").setQuery(boolQueryBuilder)/* .addAggregation(AggregationBuilders.terms("agg").field("user_id").size(20))*/.addAggregation(AggregationBuilders.cardinality("agg1").field("user_id"))//.addAggregation(AggregationBuilders.dateRange("range1").field("localtime").addRange(startdate,stopdate)).addSort("localtime", SortOrder.DESC).setSize(2000).execute().actionGet();JSONObject object=new JSONObject();object.put("total",response.getAggregations().getProperty("agg1.value").toString());JSONArray arr = new JSONArray();//取前20条不重复的useridList<String> userIds=new ArrayList<String>();SearchHit[]  hits= response.getHits().getHits();for(SearchHit hit : hits){if(userIds.size()<20){String userid = hit.getSource().get("user_id").toString();int flag = 1;for (String s : userIds) {if (s.equals(userid)) {flag = 0;break;}}if (flag == 1)//flag为1表示还没有记录该用户{userIds.add(userid);arr.add(hit.getSourceAsString());}}}object.put("userList",arr);//System.out.println(object);return object;}@Overridepublic JSONObject getUserInfoListById(String productid, String startdate, String stopdate,String userid) throws Exception {BoolQueryBuilder boolQueryBuilder = QueryBuilders.boolQuery();boolQueryBuilder.must(QueryBuilders.matchQuery("product_id", productid));boolQueryBuilder.must(QueryBuilders.regexpQuery("user_id", ".*" + userid + ".*"));boolQueryBuilder.must(QueryBuilders.rangeQuery("localtime").from(startdate).to(stopdate));SearchResponse response = Es_Client.getTransportClient().prepareSearch("razor_cd").setTypes("clientdata").setQuery(boolQueryBuilder)     // Filter/*.addAggregation(AggregationBuilders.terms("agg").field("user_id").size(20))*/.addAggregation(AggregationBuilders.cardinality("agg1").field("user_id")).addSort("localtime",SortOrder.DESC).setSize(2000).execute().actionGet();JSONObject object=new JSONObject();object.put("total",response.getAggregations().getProperty("agg1.value").toString());JSONArray arr = new JSONArray();//取前20条不重复的useridList<String> userIds=new ArrayList<String>();SearchHit[]  hits= response.getHits().getHits();for(SearchHit hit : hits){if(userIds.size()<20){String user_id = hit.getSource().get("user_id").toString();int flag = 1;for (String s : userIds) {if (s.equals(user_id)) {flag = 0;break;}}if (flag == 1)//flag为1表示还没有记录该用户{userIds.add(user_id);arr.add(hit.getSourceAsString());}}}object.put("userList",arr);//System.out.println(object);return object;}@Overridepublic JSONObject getUserInfoListByTags(String productid, String tags) throws Exception {String[] tags_arr=tags.split(";");BoolQueryBuilder boolQueryBuilder = QueryBuilders.boolQuery();boolQueryBuilder.must(QueryBuilders.matchQuery("product_id", productid));for(String tag : tags_arr){if(tag.contains("c_channel_")){boolQueryBuilder.must(QueryBuilders.matchQuery("channel_id", tag.substring(10)));}else if(tag.contains("c_provinc_")){boolQueryBuilder.must(QueryBuilders.matchQuery("region", tag.substring(10)));}else{boolQueryBuilder.must(QueryBuilders.matchQuery("app_tags.tag_name", tag));}}SearchResponse response = Es_Client.getTransportClient().prepareSearch("razor_tag").setTypes("user_tag").setQuery(boolQueryBuilder)//.addField("user_id").setSize(20).execute().actionGet();//System.out.println(response.toString());//根据查询出的用户id去clientdata中二次查询详细信息JSONObject object=new JSONObject();object.put("total",response.getHits().getTotalHits());JSONArray arr = new JSONArray();//取前20条不重复的useridList<String> userIds=new ArrayList<String>();SearchHit[]  hits= response.getHits().getHits();for(SearchHit hit : hits){<span style="white-space:pre">		</span>......<span style="white-space:pre">	</span>}return object;}@Overridepublic String getUserDetailTags(String productid, String userid) throws Exception {GetResponse usertag= Es_Client.getTransportClient().prepareGet("razor_tag", "user_tag", userid + "|" + productid).get();return usertag.getSourceAsString();}@Overridepublic JSONArray getUserDetail(String productid, String startdate, String stopdate,String userid) throws Exception {BoolQueryBuilder boolQueryBuilder = QueryBuilders.boolQuery();boolQueryBuilder.must(QueryBuilders.matchQuery("product_id", productid));boolQueryBuilder.must(QueryBuilders.regexpQuery("user_id", userid));boolQueryBuilder.must(QueryBuilders.rangeQuery("localtime").from(startdate).to(stopdate));SearchResponse response = Es_Client.getTransportClient().prepareSearch("razor_cd").setTypes("clientdata").setQuery(boolQueryBuilder)     // Filter.addSort("localtime", SortOrder.DESC).setSize(20).execute().actionGet();//Map<String,List<String>> map=new HashMap<String, List<String>>();JSONArray arr = new JSONArray();SearchHit[]  hits= response.getHits().getHits();String tmp="";int flag=1;for(SearchHit hit : hits){System.out.println(hit.getSourceAsString());JSONObject jsonObject = new JSONObject();String sessionid=hit.getSource().get("session_id").toString();if(flag==1)  //表示取第一条记录{tmp=sessionid;flag=0;}else {    //取第1条之后的记录if(tmp.equals(sessionid))  //重复的sessionid,直接结束,进入下次循环{continue;}else {tmp=sessionid;}}//1.添本次session的clientdata数据jsonObject.put("clientdata",hit.getSourceAsString());//2.添本次session的usinglogGetResponse usinglog= Es_Client.getTransportClient().prepareGet("razor_usinglog", "usinglog", userid + "|" + sessionid).get();jsonObject.put("usinglog", usinglog.getSourceAsString());//3.添本次session的eventGetResponse event= Es_Client.getTransportClient().prepareGet("razor_event", "event", userid + "|" + sessionid).get();jsonObject.put("event",event.getSourceAsString());arr.add(jsonObject);}return arr;}@Overridepublic String getTagTop(String productid) throws Exception {BoolQueryBuilder boolQueryBuilder = QueryBuilders.boolQuery();boolQueryBuilder.must(QueryBuilders.matchQuery("product_id", productid));//boolQueryBuilder.must(QueryBuilders.rangeQuery("add_time").from(startdate).to(stopdate));SearchResponse response = Es_Client.getTransportClient().prepareSearch("razor_tag").setTypes("user_tag").setQuery(boolQueryBuilder)     .addAggregation(AggregationBuilders.terms("agg").field("app_tags.tag_name").size(20)).addAggregation(AggregationBuilders.cardinality("agg1").field("app_tags.tag_name")).setSize(0).execute().actionGet();return response.toString();}}


这篇关于ES2.x版本的javaAPI使用实例的文章就介绍到这儿,希望我们推荐的文章对编程师们有所帮助!



http://www.chinasem.cn/article/727341

相关文章

springboot3.x使用@NacosValue无法获取配置信息的解决过程

《springboot3.x使用@NacosValue无法获取配置信息的解决过程》在SpringBoot3.x中升级Nacos依赖后,使用@NacosValue无法动态获取配置,通过引入SpringC... 目录一、python问题描述二、解决方案总结一、问题描述springboot从2android.x

Nginx服务器部署详细代码实例

《Nginx服务器部署详细代码实例》Nginx是一个高性能的HTTP和反向代理web服务器,同时也提供了IMAP/POP3/SMTP服务,:本文主要介绍Nginx服务器部署的相关资料,文中通过代码... 目录Nginx 服务器SSL/TLS 配置动态脚本反向代理总结Nginx 服务器Nginx是一个‌高性

SpringBoot整合AOP及使用案例实战

《SpringBoot整合AOP及使用案例实战》本文详细介绍了SpringAOP中的切入点表达式,重点讲解了execution表达式的语法和用法,通过案例实战,展示了AOP的基本使用、结合自定义注解以... 目录一、 引入依赖二、切入点表达式详解三、案例实战1. AOP基本使用2. AOP结合自定义注解3.

Python中Request的安装以及简单的使用方法图文教程

《Python中Request的安装以及简单的使用方法图文教程》python里的request库经常被用于进行网络爬虫,想要学习网络爬虫的同学必须得安装request这个第三方库,:本文主要介绍P... 目录1.Requests 安装cmd 窗口安装为pycharm安装在pycharm设置中为项目安装req

Java实现字符串大小写转换的常用方法

《Java实现字符串大小写转换的常用方法》在Java中,字符串大小写转换是文本处理的核心操作之一,Java提供了多种灵活的方式来实现大小写转换,适用于不同场景和需求,本文将全面解析大小写转换的各种方法... 目录前言核心转换方法1.String类的基础方法2. 考虑区域设置的转换3. 字符级别的转换高级转换

使用Python将PDF表格自动提取并写入Word文档表格

《使用Python将PDF表格自动提取并写入Word文档表格》在实际办公与数据处理场景中,PDF文件里的表格往往无法直接复制到Word中,本文将介绍如何使用Python从PDF文件中提取表格数据,并将... 目录引言1. 加载 PDF 文件并准备 Word 文档2. 提取 PDF 表格并创建 Word 表格

使用Python实现局域网远程监控电脑屏幕的方法

《使用Python实现局域网远程监控电脑屏幕的方法》文章介绍了两种使用Python在局域网内实现远程监控电脑屏幕的方法,方法一使用mss和socket,方法二使用PyAutoGUI和Flask,每种方... 目录方法一:使用mss和socket实现屏幕共享服务端(被监控端)客户端(监控端)方法二:使用PyA

Python使用Matplotlib和Seaborn绘制常用图表的技巧

《Python使用Matplotlib和Seaborn绘制常用图表的技巧》Python作为数据科学领域的明星语言,拥有强大且丰富的可视化库,其中最著名的莫过于Matplotlib和Seaborn,本篇... 目录1. 引言:数据可视化的力量2. 前置知识与环境准备2.1. 必备知识2.2. 安装所需库2.3

SpringBoot简单整合ElasticSearch实践

《SpringBoot简单整合ElasticSearch实践》Elasticsearch支持结构化和非结构化数据检索,通过索引创建和倒排索引文档,提高搜索效率,它基于Lucene封装,分为索引库、类型... 目录一:ElasticSearch支持对结构化和非结构化的数据进行检索二:ES的核心概念Index:

Python数据验证神器Pydantic库的使用和实践中的避坑指南

《Python数据验证神器Pydantic库的使用和实践中的避坑指南》Pydantic是一个用于数据验证和设置的库,可以显著简化API接口开发,文章通过一个实际案例,展示了Pydantic如何在生产环... 目录1️⃣ 崩溃时刻:当你的API接口又双叒崩了!2️⃣ 神兵天降:3行代码解决验证难题3️⃣ 深度