es-geo查询

2024-08-24 15:08
文章标签 es 查询 geo

本文主要是介绍es-geo查询,希望对大家解决编程问题提供一定的参考价值,需要的开发者们随着小编来一起学习吧!

最近有两个需求是通过地图选择坐标,查询指定距离内的信息,和通过坐标集合组成不规则形状查询出不规则形状范围内的数据,在最起初我看到这个需求的时候第一个想法就是太复杂了,抵触。但是没有办法既然需求下来了只能硬着头皮上了,在调研之后最终还是决定了使用elasticsearch,下面就开始介绍如何使用elasticsearch来进行相关操作

设置数据格式

地理坐标点(geo-point) 是指地球表面可以用经纬度描述的一个点。地理坐标点可以用来计算两个坐标位置间的距离,或者判断一个点是否在一个区域中。地理坐标点不能被动态映射(dynamic mapping)自动检测,而是需要显式声明对应字段类型为 geo_point ,例子中的location字段

PUT platform_foreign_website
{"mappings": {"store":{"properties": {"id": {"type": "text"},"storeName": {"type": "text"},"location":{"type": "geo_point"}}}}
}

存储示例:

  • 半角逗号分割的字符串形式 “lat,lon“
  • 明确以 lat 和 lon 作为属性的对象
  • 数组形式表示 [lon,lat]

需要特别注意的就是纬度在前边经度在后边(latitude,longitude),数组表示形式是经度在前纬度在后([longitude,latitude])

geo_distance 找出指定位置在给定距离内的数据,相当于指定圆心和半径找到圆中点

  • 找出两千米范围内的所有门店
  • distance:距离 单位/km
  • location:坐标点 圆心所在位置

es代码示例

//无排序
GET platform_foreign_website/communit/_search
{"query": {"constant_score": {"filter": {"geo_distance": {"distance": "2km","location": {"lat": 39.662263,"lon": 118.197815}}},"boost": 1.2}}
}//带排序
GET platform_foreign_website/communit/_search
{"query": {"constant_score": {"filter": {"geo_distance": {"distance": "1km","location": {"lat": 39.662263,"lon": 118.197815}}},"boost": 1.2}},"sort": [{"_geo_distance" : {"location" : [{"lat" : 40.010955,"lon" : 118.68545}],"unit" : "km","distance_type" : "arc","order" : "asc","validation_method" : "STRICT"}
}]
}

java代码示例:

这里选用的是ElasticsearchTemplate 模板,因为没有分页取值比较方便,可以根据自己的业务逻辑自行选择

//无排序
private List<Store> getStores(CommunityToStoreParameter communityToStoreParameter) {//拼接条件BoolQueryBuilder boolQueryBuilder = QueryBuilders.boolQuery();QueryBuilder isdeleteBuilder = QueryBuilders.termQuery("isdelete", false);// 以某点为中心,搜索指定范围GeoDistanceQueryBuilder distanceQueryBuilder = new GeoDistanceQueryBuilder("location");distanceQueryBuilder.point(communityToStoreParameter.getLatitude(), communityToStoreParameter.getLongitude());//查询单位:kmdistanceQueryBuilder.distance(communityAndStoresdistance, DistanceUnit.KILOMETERS);boolQueryBuilder.filter(distanceQueryBuilder);boolQueryBuilder.must(isdeleteBuilder);SearchQuery storesearchQuery = new NativeSearchQueryBuilder().withIndices(ESIndexAndTypeConstant.INDEX_NAME).withTypes(ESIndexAndTypeConstant.STORE_TYPE_NAME).withQuery(boolQueryBuilder).build();return elasticsearchTemplate.queryForList(storesearchQuery, Store.class);}//有排序
private Page<Store> getStores(Integer page, Integer size, AroundStoreParameter aroundStoreParameter, Double latitude, Double longitude, QueryBuilder isdeleteBuilder) {Pageable pageable = PageRequest.of(page - 1, size);NativeSearchQueryBuilder nativeSearchQueryBuilder = new NativeSearchQueryBuilder();BoolQueryBuilder boolQueryBuilder = new BoolQueryBuilder();// 以某点为中心,搜索指定范围GeoDistanceQueryBuilder distanceQueryBuilder = new GeoDistanceQueryBuilder("location");distanceQueryBuilder.point(latitude, longitude);//查询单位:kmdistanceQueryBuilder.distance(aroundStoreParameter.getDistance(), DistanceUnit.KILOMETERS);boolQueryBuilder.filter(distanceQueryBuilder);boolQueryBuilder.must(isdeleteBuilder);nativeSearchQueryBuilder.withQuery(boolQueryBuilder);// 按距离升序GeoDistanceSortBuilder distanceSortBuilder =new GeoDistanceSortBuilder("location", latitude, longitude);distanceSortBuilder.unit(DistanceUnit.KILOMETERS);distanceSortBuilder.order(SortOrder.ASC);nativeSearchQueryBuilder.withSort(distanceSortBuilder);nativeSearchQueryBuilder.withPageable(pageable);return storeRepository.search(nativeSearchQueryBuilder.build());}

geo_polygon(地理多边形查询): 一个查询,查询多边形内的所有的点,实现地图画圈筛选

es代码示例

GET platform_foreign_website/store/_search
{"query": {"bool": {"must": [{"match_all": {}}],"filter": {"geo_polygon": {"location": {"points": [{ "lat": 39.634863, "lon": 118.137071 },{ "lat": 39.6349, "lon": 118.13291 },{ "lat": 39.633121, "lon": 118.128941 },{ "lat": 39.629607, "lon": 118.130915 },{ "lat": 39.632696, "lon": 118.132769 },{ "lat": 39.630513, "lon": 118.136018 }]}}}}}
}

java代码示例

public PageResultVO storeRange(Integer page, Integer size, List<StoreRangeParameter> storeRangeParameters) {Pageable pageable = PageRequest.of(page - 1, size);//坐标集合List<GeoPoint> geoPoints = storeRangeParameters.stream().map(a ->new GeoPoint(a.getLatitude(), a.getLongitude())).collect(Collectors.toList());//拼接查询条件BoolQueryBuilder boolQueryBuilder = QueryBuilders.boolQuery();QueryBuilder locationBuilder = QueryBuilders.geoPolygonQuery("location", geoPoints);QueryBuilder isdeleteBuilder = QueryBuilders.termQuery("isdelete", false);boolQueryBuilder.filter(locationBuilder);boolQueryBuilder.must(isdeleteBuilder);SearchQuery communityNativeBuilder = new NativeSearchQueryBuilder().withPageable(pageable).withQuery(boolQueryBuilder).build();Page<Community> communities = communityRepository.search(communityNativeBuilder);List<CommunityInfoResultVO> communityInfoResultVOList = communities.getContent().stream().map(community ->new CommunityInfoResultVO(community.getCommunityName(), community.getLongitude(), community.getLatitude())).collect(Collectors.toList());return new PageResultVO<>(communities.getTotalElements(), communityInfoResultVOList);}

这里说明一下为什么有的是用filter()有的使用must():must查询需要打分评估进行_score,但是filter,先使用filter把无用的数据过滤掉,在已经处理过的数据中must查询,能够有效地提升性能

这里说了 geo_distance(找出与指定位置在给定距离内的点) 和 geo_polygon(找出落在多边形中的点)两种方法,elasticsearch其实还有另外两种 方法 geo_bounding_box(找出落在指定矩形框中的坐标点) 和 geo_distance_range(找出与指定点距离在给定最小距离和最大距离之间的点),因为需求没有涉及到暂时没有调研,以后会慢慢完善

所有这些过滤器的工作方式都相似: 把 索引中所有文档(而不仅仅是查询中匹配到的部分文档,见 fielddata-intro)的经纬度信息都载入内存,然后每个过滤器执行一个轻量级的计算去判断当前点是否落在指定区域

geo_bounding_box(盒模型)找出落在指定矩形框中的坐标点,用于可视化范围筛选,例如:整个屏幕范围内的数据筛选(左上角坐标点和右下角坐标点)

es示例

GET platform_foreign_website/store/_search
{"query": {"bool": {"must": [{"match_all": {}}],"filter": {"geo_bounding_box": {"location": {"top_left": {"lat": 39.634863,"lon": 118.137071},"bottom_right": {"lat": 39.630513,"lon": 118.136018}}}}}}
}

java 代码示例

public TotalResultVO regionList(){BoolQueryBuilder boolQueryBuilder = QueryBuilders.boolQuery();QueryBuilder isdeleteBuilder = QueryBuilders.termQuery("if_deleted", 0);QueryBuilder positionBuilder = QueryBuilders.existsQuery("position");boolQueryBuilder.must(isdeleteBuilder).must(positionBuilder);//坐标顺序一定要是左上 和右下 ,顺序不对查询结果会有问题 QueryBuilder positionQueryBuilder = QueryBuilders.geoBoundingBoxQuery("position").setCorners(new GeoPoint(Latitude,Longitude), new GeoPoint(Latitude,Longitude));boolQueryBuilder.filter(positionQueryBuilder);SearchQuery searchQuery =new   NativeSearchQueryBuilder().withPageable(getPageable()).withQuery(boolQueryBuilder).build();Page<Region> regionPage = regionRepository.search(searchQuery);
}

geo_distance_range 找出与指定点距离在给定最小距离和最大距离之间的点, 5.x版本不再支持,建议使用 geo_distance

这篇关于es-geo查询的文章就介绍到这儿,希望我们推荐的文章对编程师们有所帮助!



http://www.chinasem.cn/article/1102830

相关文章

Java实现复杂查询优化的7个技巧小结

《Java实现复杂查询优化的7个技巧小结》在Java项目中,复杂查询是开发者面临的“硬骨头”,本文将通过7个实战技巧,结合代码示例和性能对比,手把手教你如何让复杂查询变得优雅,大家可以根据需求进行选择... 目录一、复杂查询的痛点:为何你的代码“又臭又长”1.1冗余变量与中间状态1.2重复查询与性能陷阱1.

MySQL中查询和展示LONGBLOB类型数据的技巧总结

《MySQL中查询和展示LONGBLOB类型数据的技巧总结》在MySQL中LONGBLOB是一种二进制大对象(BLOB)数据类型,用于存储大量的二进制数据,:本文主要介绍MySQL中查询和展示LO... 目录前言1. 查询 LONGBLOB 数据的大小2. 查询并展示 LONGBLOB 数据2.1 转换为十

使用SpringBoot+InfluxDB实现高效数据存储与查询

《使用SpringBoot+InfluxDB实现高效数据存储与查询》InfluxDB是一个开源的时间序列数据库,特别适合处理带有时间戳的监控数据、指标数据等,下面详细介绍如何在SpringBoot项目... 目录1、项目介绍2、 InfluxDB 介绍3、Spring Boot 配置 InfluxDB4、I

Go语言使用Gin处理路由参数和查询参数

《Go语言使用Gin处理路由参数和查询参数》在WebAPI开发中,处理路由参数(PathParameter)和查询参数(QueryParameter)是非常常见的需求,下面我们就来看看Go语言... 目录一、路由参数 vs 查询参数二、Gin 获取路由参数和查询参数三、示例代码四、运行与测试1. 测试编程路

MySQL 数据库表与查询操作实战案例

《MySQL数据库表与查询操作实战案例》本文将通过实际案例,详细介绍MySQL中数据库表的设计、数据插入以及常用的查询操作,帮助初学者快速上手,感兴趣的朋友跟随小编一起看看吧... 目录mysql 数据库表操作与查询实战案例项目一:产品相关数据库设计与创建一、数据库及表结构设计二、数据库与表的创建项目二:员

Linux查询服务器 IP 地址的命令详解

《Linux查询服务器IP地址的命令详解》在服务器管理和网络运维中,快速准确地获取服务器的IP地址是一项基本但至关重要的技能,下面我们来看看Linux中查询服务器IP的相关命令使用吧... 目录一、hostname 命令:简单高效的 IP 查询工具命令详解实际应用技巧注意事项二、ip 命令:新一代网络配置全

Linux查询服务器系统版本号的多种方法

《Linux查询服务器系统版本号的多种方法》在Linux系统管理和维护工作中,了解当前操作系统的版本信息是最基础也是最重要的操作之一,系统版本不仅关系到软件兼容性、安全更新策略,还直接影响到故障排查和... 目录一、引言:系统版本查询的重要性二、基础命令解析:cat /etc/Centos-release详

MySQL慢查询工具的使用小结

《MySQL慢查询工具的使用小结》使用MySQL的慢查询工具可以帮助开发者识别和优化性能不佳的SQL查询,本文就来介绍一下MySQL的慢查询工具,具有一定的参考价值,感兴趣的可以了解一下... 目录一、启用慢查询日志1.1 编辑mysql配置文件1.2 重启MySQL服务二、配置动态参数(可选)三、分析慢查

MyBatis流式查询两种实现方式

《MyBatis流式查询两种实现方式》本文详解MyBatis流式查询,通过ResultHandler和Cursor实现边读边处理,避免内存溢出,ResultHandler逐条回调,Cursor支持迭代... 目录MyBATis 流式查询详解:ResultHandler 与 Cursor1. 什么是流式查询?

Java慢查询排查与性能调优完整实战指南

《Java慢查询排查与性能调优完整实战指南》Java调优是一个广泛的话题,它涵盖了代码优化、内存管理、并发处理等多个方面,:本文主要介绍Java慢查询排查与性能调优的相关资料,文中通过代码介绍的非... 目录1. 事故全景:从告警到定位1.1 事故时间线1.2 关键指标异常1.3 排查工具链2. 深度剖析: