【青梅快讯】Greenplum关键组件版本更新:GPSS 1.6.0和GPCC 6.5已发布

本文主要是介绍【青梅快讯】Greenplum关键组件版本更新:GPSS 1.6.0和GPCC 6.5已发布,希望对大家解决编程问题提供一定的参考价值,需要的开发者们随着小编来一起学习吧!

99107bf9-cdb3-41c5-9415-172916e58108.jpg

Greenplum商业版具有众多扩展组件来帮助用户更便捷的使用Greenplum,其中Greenplum监控管理平台GPCC和数据加载解决方案GPSS均是其中关键组件之一,在过去的一个月中,GPSS和GPCC均进行了版本更新,现在让我们带大家了解一下,新版本的GPSS和GPCC都带来了哪些新功能。


GPSS (Greenplum stream server) 1.6.0 发布



GPSS 1.6.0已于5日28日正式发布。Greenplum Stream Server(简称GPSS)是Greenplum下一代数据加载解决方案,能将不同源端的增量数据同步到Greenplum中。


GPSS 1.6.0 新功能


  1. gpss增加-c选项, 用于指定配置文件路径

  2. gpsscli的--version参数也会打印gpss server的版本信息

  3. gpss和gpsscli日志支持--color和--csv格式, 默认为空格分隔的文本格式

  4. gpss的Kafka job配置新增IDLE_DURATION 参数, 当超过IDLE_DURATION 时间后对应的kafka topic中没有新消息, GPSS将会释放目标表的锁

  5. gpss新增SCHEMA_PATH_ON_GPDB 参数, 支持从Greenplum集群的segment节点上获取avro的schema

  6. gpss新增FALLBACK_OFFSET 参数, 可以设置当消息的offset不连续时(未及时加载就被清空)时,从何处继续加载消息

  7. gpss支持基于HTTPS的scheme service服务

  8. gpss支持了kafka的group.id 配置, 可通过第三方工具监控加载进度

  9. 除了exactly once, gpss支持最多一次和最少一次一致性保证

  10. gpss支持通过custom formatter方式实现自定义消息格式


实验功能


  1. gpss新增了RECOVER_FAILING_BATCH 配置, 可以将Greenplum无法处理的事务中的错误数据暂存

  2. gpss组件增加了新的dataflow extension, 包含gp_jsonb数据类型和text_in formatter


GPCC(Greenplum Command Center) 6.5发布



GPCC 6.5已于5月31日正式发布。Greenplum Command Center 6.5 为 Tanzu Greenplum Database 6 提供管理和监控功能。


Greenplum Command Center 6.5 与以下平台兼容。


  • Tanzu Greenplum 数据库 6.x。

  • Redhat 企业版 Linux 6.x1 和 7.x

  • CentOS 6.x1 和 7.x

  • SUSE 企业版 Linux 12

  • Ubuntu 18.04


有关最新的兼容性信息,请参阅 Tanzu Greenplum Command Center支持平台相关文档:https://gpcc.docs.pivotal.io/supported-platforms/gpcc.html)


GPCC 6.5版本增强功能


  1. 查询监视器(Query Monitor)页面现允许用户根据查询的状态(正在运行、已排队或已阻止)过滤显示的查询。更多信息,请参阅查询监视器文档(https://gpcc.docs.pivotal.io/650/topics/ui/query-monitor.html)。
  2. 查询监视器页面现包含高级搜索工具。该工具允许用户根据查询指标(例如查询 ID、数据库名称、资源组等)过滤显示的查询。有关更多信息,请参阅查询监视器文档页面(https://gpcc.docs.pivotal.io/650/topics/ui/query-monitor.html)。
  3. 用户现在可以暂停查询监视器以查看查询的快照。有关更多信息,请参阅查询监视器文档页面(https://gpcc.docs.pivotal.io/650/topics/ui/query-monitor.html)
  4. 查询监视器现在显示有关会话的各种信息,例如会话状态、关联的用户和数据库、空闲时间和关联的查询等。具有管理员或操作员权限的用户可以查看和取消所有用户的会话,以及将会话详细信息导出到 CSV 文件。有关更多信息,请参阅查询监视器文档页面(https://gpcc.docs.pivotal.io/650/topics/ui/query-monitor.html)。
  5. 实时查询详细信息页面现在可以显示查询的查询标签。
  6. 查询历史详情页面现在可以显示查询的查询标签。
  7. 在历史记录页面上,高级搜索工具现在允许用户过滤查询的查询标签。有关更多信息,请参阅历史文档页面。(https://gpcc.docs.pivotal.io/650/topics/ui/history.html)
  8. 用户可以创建工作负载规则来终止空闲会话,并可以检查终止会话的规则日志。有关更多信息,请参阅工作负载管理文档页面。(https://gpcc.docs.pivotal.io/650/topics/ui/workload-management.html)
  9. 用户可以通过溢出文件大小创建规则。有关更多信息,请参阅工作负载管理文档页面。(https://gpcc.docs.pivotal.io/650/topics/ui/workload-management.html)
  10. gpmetrics 模式包含一个新的 gpmetrics.gpcc_queries_now 表,用于存储实时查询指标数据。
  11. gpcc_wlm_rule 表增加了两行:一个用于存储空闲会话终止规则的参数,另一个用于存储溢出文件大小。更多信息,请参阅gpmetrics 架构参考文档(https://gpcc.docs.pivotal.io/650/topics/ref-gpmetrics.html)
  12. Greenplum Command Center将不再支持Microsoft IE 浏览器。






点击文末“ 阅读原文 ”,获取Greenplum中文资源。


948981c9-4b75-43ef-a530-6629d24fde46.gif

24470e06-573b-42f2-9f5a-d5a53fe69178.png来一波 “在看”、“分享”和 “赞” 吧!


本文分享自微信公众号 - Greenplum中文社区(GreenplumCommunity)。
如有侵权,请联系 support@oschina.cn 删除。
本文参与“OSC源创计划”,欢迎正在阅读的你也加入,一起分享。

这篇关于【青梅快讯】Greenplum关键组件版本更新:GPSS 1.6.0和GPCC 6.5已发布的文章就介绍到这儿,希望我们推荐的文章对编程师们有所帮助!



http://www.chinasem.cn/article/363657

相关文章

Vue和React受控组件的区别小结

《Vue和React受控组件的区别小结》本文主要介绍了Vue和React受控组件的区别小结,文中通过示例代码介绍的非常详细,对大家的学习或者工作具有一定的参考学习价值,需要的朋友们下面随着小编来一起学... 目录背景React 的实现vue3 的实现写法一:直接修改事件参数写法二:通过ref引用 DOMVu

修复已被利用的高危漏洞! macOS Sequoia 15.6.1发布

《修复已被利用的高危漏洞!macOSSequoia15.6.1发布》苹果公司于今日发布了macOSSequoia15.6.1更新,这是去年9月推出的macOSSequoia操作... MACOS Sequoia 15.6.1 正式发布!此次更新修复了一个已被黑客利用的严重安全漏洞,并解决了部分中文用户反馈的

Ubuntu如何升级Python版本

《Ubuntu如何升级Python版本》Ubuntu22.04Docker中,安装Python3.11后,使用update-alternatives设置为默认版本,最后用python3-V验证... 目China编程录问题描述前提环境解决方法总结问题描述Ubuntu22.04系统自带python3.10,想升级

MySQL 数据库表操作完全指南:创建、读取、更新与删除实战

《MySQL数据库表操作完全指南:创建、读取、更新与删除实战》本文系统讲解MySQL表的增删查改(CURD)操作,涵盖创建、更新、查询、删除及插入查询结果,也是贯穿各类项目开发全流程的基础数据交互原... 目录mysql系列前言一、Create(创建)并插入数据1.1 单行数据 + 全列插入1.2 多行数据

linux安装、更新、卸载anaconda实践

《linux安装、更新、卸载anaconda实践》Anaconda是基于conda的科学计算环境,集成1400+包及依赖,安装需下载脚本、接受协议、设置路径、配置环境变量,更新与卸载通过conda命令... 目录随意找一个目录下载安装脚本检查许可证协议,ENTER就可以安装完毕之后激活anaconda安装更

更改linux系统的默认Python版本方式

《更改linux系统的默认Python版本方式》通过删除原Python软链接并创建指向python3.6的新链接,可切换系统默认Python版本,需注意版本冲突、环境混乱及维护问题,建议使用pyenv... 目录更改系统的默认python版本软链接软链接的特点创建软链接的命令使用场景注意事项总结更改系统的默

Linux升级或者切换python版本实现方式

《Linux升级或者切换python版本实现方式》本文介绍在Ubuntu/Debian系统升级Python至3.11或更高版本的方法,通过查看版本列表并选择新版本进行全局修改,需注意自动与手动模式的选... 目录升级系统python版本 (适用于全局修改)对于Ubuntu/Debian系统安装后,验证Pyt

MySQL 升级到8.4版本的完整流程及操作方法

《MySQL升级到8.4版本的完整流程及操作方法》本文详细说明了MySQL升级至8.4的完整流程,涵盖升级前准备(备份、兼容性检查)、支持路径(原地、逻辑导出、复制)、关键变更(空间索引、保留关键字... 目录一、升级前准备 (3.1 Before You Begin)二、升级路径 (3.2 Upgrade

Nginx进行平滑升级的实战指南(不中断服务版本更新)

《Nginx进行平滑升级的实战指南(不中断服务版本更新)》Nginx的平滑升级(也称为热升级)是一种在不停止服务的情况下更新Nginx版本或添加模块的方法,这种升级方式确保了服务的高可用性,避免了因升... 目录一.下载并编译新版Nginx1.下载解压2.编译二.替换可执行文件,并平滑升级1.替换可执行文件

SQL Server跟踪自动统计信息更新实战指南

《SQLServer跟踪自动统计信息更新实战指南》本文详解SQLServer自动统计信息更新的跟踪方法,推荐使用扩展事件实时捕获更新操作及详细信息,同时结合系统视图快速检查统计信息状态,重点强调修... 目录SQL Server 如何跟踪自动统计信息更新:深入解析与实战指南 核心跟踪方法1️⃣ 利用系统目录