国泰君安期货:基于分布式架构的智能推送系统,满足单日亿级消息处理量

本文主要是介绍国泰君安期货:基于分布式架构的智能推送系统,满足单日亿级消息处理量,希望对大家解决编程问题提供一定的参考价值,需要的开发者们随着小编来一起学习吧!

中国期货市场正经历着从量变到质变、加速提档的过程。近五年来,新增期权期货交易品种过百个,国际化品种大幅增加,市场交易规模迅速扩大。2022 年期货行业单边成交量约 70 亿手,为 2018 年的 2.5 倍,占全球总成交量的 8.07%。其中,国内商品期货与期权成交量为 66.16 亿手,占全球商品期货与期权总成交量 91.53 亿手的 72.3%。中国期货行业总资产、客户权益均比 5 年前翻了一番。

期货业态走向多元化,目前已形成包括期货经纪、投资咨询、资产管理、风险管理等在内的服务体系,尤其是期货资产管理、风险管理子公司两项创新业务的推出,令期货公司服务实体经济的手段得以丰富,发展之路渐行渐宽,前景光明。

2021 年,证监会发布《证券期货业科技发展“十四五”规划》,主要围绕“推进证券期货行业数字化转型发展” 与“数据让监管更加智慧”两大主线,旨在依托新一代信息技术,建设敏捷高效可复用的新一代数字技术基础设施,提升核心架构安全可控水平,为业务数字化创新提供高效的一体化服务支撑。

为适应国内外期货市场不断变化,及时满足和响应业务发展需求,国泰君安期货(以下简称“国君期货”)将金融科技上升为公司战略,加快公司数字化转型,推动公司业务模式、服务模式和工作模式的创新发展。

图片

期货行业对于业务的连续性和低延时都有着较高的要求,无论是期货交易还是客户服务,现有的 IT 基础架构已无法满足不断变化的业务应用场景需求。如:量化交易、实时分析、精细化运营、消息推送、个性化服务等。

目前传统期货业 IT 架构面临着诸多问题和挑战。主要体现在以下几个方面:系统大多分散维护,烟囱式发展,导致统一架构规划困难,缺乏资源弹性管理基础;系统紧耦合,导致新功能开发周期长工作量大、业务故障恢复周期长;数据平台建设与业务发展存在鸿沟,业务和技术融合不畅;缺乏数据治理手段,数据孤岛问题日趋严峻。

图片

针对上述挑战,国君期货近年来积极主动与国产厂商深度合作,针对服务器、数据库、操作系统、应用软件等产品进行技术研究,探索新一代业务系统向分布式架构转型。

图片

在传统 IT 架构向国产分布式架构转型过程中,数据库架构的转型是十分关键的一环。国君期货原有的数据库多为集中式数据库。随着业务量的增加和交易方式的演变, 人均智能设备使用越来越多,期货业产生的数据量呈几何级增长。因此,对数据库的扩展性和处理能力提出了更高的要求,传统的单机和集中式数据库架构在应对海量数据并行处理中逐渐显露疲态与不足。

期货公司移动端线上零售业务的开展,需要通过消息通知等方式来主动触达客户,以促进用户留存和业务转化。以往,传统模式人工收集信息后依经验选择推送时机和目标用户,只能局限于粗放式小规模的推送运营,无法对场景和用户进行精细化识别,更无法完成个性化触达。智能推送系统通过对业务和用户数据的标准化治理以及下游规则引擎的搭建,实现了“搭积木”式的场景构建,当业务事件触发时,自动匹配用户准确发送消息,而无需人工进行干预。

国君期货智能推送系统单日数据增量已达亿级, 原基于 MySQL 的架构,已经无法满足实时写入、高并发查询、海量历史数据存储等业务需求。经过研究论证,国君期货将智能推送系统从旧的单体架构升级为可水平扩展的分布式架构,采用完全自研的国产原生分布式数据库 OceanBase+国产 ARM 服务器,替换掉原有的 MySQL 数据库+中高配 X86 服务器。

实现了垂直单体架构数据库向分布式数据库架构的平滑替换,采用分布式架构的智能推送系统,结合 OceanBase 分区级负载均衡能力, 使业务集群整体具备了高性能和高扩展性。在行情异动、账户风险率预警、持仓合约临近交割、异常交易预警等场景下充分发挥快速、精准的优势,显著提升用户体验,将业务部门从以往手工式通知联系客户的各种繁琐工作中解放出来。

图片

整体而言,基于国产硬件服务器、国产操作系统和分布式数据库 OceanBase 的智能推送系统,大幅度提升了业务服务能力和创新能力。为业务长期增长和实现关键基础设施自主可控的目标,打下坚实基础,,迈出了数字化转型的关键一步。

截止目前,国君期货已初步建成了以容器化、微服务、云平台、低代码框架、分布式存储、低延时互联互通网络为架构底座;以数据中台、业务中台为载体;以客户服务平台、营销管理平台、统一风险管理系统等为支撑,集研究、运营、办公为一体的高效协同综合服务平台。

随着数字化转型深入,未来国君期货将在基础架构稳健、运维监控体系完善的前提下,踏实做好业务数字化和智能化的迭代,持续提升精细化经营管理能力,运用金融科技赋能业务发展,在服务实体经济高质量发展和资本市场全面深化改革中展现新担当。

这篇关于国泰君安期货:基于分布式架构的智能推送系统,满足单日亿级消息处理量的文章就介绍到这儿,希望我们推荐的文章对编程师们有所帮助!



http://www.chinasem.cn/article/165905

相关文章

SpringBoot+Vue3整合SSE实现实时消息推送功能

《SpringBoot+Vue3整合SSE实现实时消息推送功能》在日常开发中,我们经常需要实现实时消息推送的功能,这篇文章将基于SpringBoot和Vue3来简单实现一个入门级的例子,下面小编就和大... 目录前言先大概介绍下SSE后端实现(SpringBoot)前端实现(vue3)1. 数据类型定义2.

Nginx概念、架构、配置与虚拟主机实战操作指南

《Nginx概念、架构、配置与虚拟主机实战操作指南》Nginx是一个高性能的HTTP服务器、反向代理服务器、负载均衡器和IMAP/POP3/SMTP代理服务器,它支持高并发连接,资源占用低,功能全面且... 目录Nginx 深度解析:概念、架构、配置与虚拟主机实战一、Nginx 的概念二、Nginx 的特点

CPython与PyPy解释器架构的性能测试结果对比

《CPython与PyPy解释器架构的性能测试结果对比》Python解释器的选择对应用程序性能有着决定性影响,CPython以其稳定性和丰富的生态系统著称;而PyPy作为基于JIT(即时编译)技术的替... 目录引言python解释器架构概述CPython架构解析PyPy架构解析架构对比可视化性能基准测试测

C++简单日志系统实现代码示例

《C++简单日志系统实现代码示例》日志系统是成熟软件中的一个重要组成部分,其记录软件的使用和运行行为,方便事后进行故障分析、数据统计等,:本文主要介绍C++简单日志系统实现的相关资料,文中通过代码... 目录前言Util.hppLevel.hppLogMsg.hppFormat.hppSink.hppBuf

MySQL集群高可用架构的两种使用小结

《MySQL集群高可用架构的两种使用小结》本文介绍了MySQL的两种高可用解决方案:组复制(MGR)和MasterHighAvailability(MHA),文中通过示例代码介绍的非常详细,对大家的学... 目录一、mysql高可用之组复制(MGR)1.1 组复制核心特性与优势1.2 组复制架构原理1.3

Nginx分布式部署流程分析

《Nginx分布式部署流程分析》文章介绍Nginx在分布式部署中的反向代理和负载均衡作用,用于分发请求、减轻服务器压力及解决session共享问题,涵盖配置方法、策略及Java项目应用,并提及分布式事... 目录分布式部署NginxJava中的代理代理分为正向代理和反向代理正向代理反向代理Nginx应用场景

Java 线程池+分布式实现代码

《Java线程池+分布式实现代码》在Java开发中,池通过预先创建并管理一定数量的资源,避免频繁创建和销毁资源带来的性能开销,从而提高系统效率,:本文主要介绍Java线程池+分布式实现代码,需要... 目录1. 线程池1.1 自定义线程池实现1.1.1 线程池核心1.1.2 代码示例1.2 总结流程2. J

linux系统中java的cacerts的优先级详解

《linux系统中java的cacerts的优先级详解》文章讲解了Java信任库(cacerts)的优先级与管理方式,指出JDK自带的cacerts默认优先级更高,系统级cacerts需手动同步或显式... 目录Java 默认使用哪个?如何检查当前使用的信任库?简要了解Java的信任库总结了解 Java 信

Spring Boot分层架构详解之从Controller到Service再到Mapper的完整流程(用户管理系统为例)

《SpringBoot分层架构详解之从Controller到Service再到Mapper的完整流程(用户管理系统为例)》本文将以一个实际案例(用户管理系统)为例,详细解析SpringBoot中Co... 目录引言:为什么学习Spring Boot分层架构?第一部分:Spring Boot的整体架构1.1

Rust 智能指针的使用详解

《Rust智能指针的使用详解》Rust智能指针是内存管理核心工具,本文就来详细的介绍一下Rust智能指针(Box、Rc、RefCell、Arc、Mutex、RwLock、Weak)的原理与使用场景,... 目录一、www.chinasem.cnRust 智能指针详解1、Box<T>:堆内存分配2、Rc<T>: