国泰君安期货:基于分布式架构的智能推送系统,满足单日亿级消息处理量

本文主要是介绍国泰君安期货:基于分布式架构的智能推送系统,满足单日亿级消息处理量,希望对大家解决编程问题提供一定的参考价值,需要的开发者们随着小编来一起学习吧!

中国期货市场正经历着从量变到质变、加速提档的过程。近五年来,新增期权期货交易品种过百个,国际化品种大幅增加,市场交易规模迅速扩大。2022 年期货行业单边成交量约 70 亿手,为 2018 年的 2.5 倍,占全球总成交量的 8.07%。其中,国内商品期货与期权成交量为 66.16 亿手,占全球商品期货与期权总成交量 91.53 亿手的 72.3%。中国期货行业总资产、客户权益均比 5 年前翻了一番。

期货业态走向多元化,目前已形成包括期货经纪、投资咨询、资产管理、风险管理等在内的服务体系,尤其是期货资产管理、风险管理子公司两项创新业务的推出,令期货公司服务实体经济的手段得以丰富,发展之路渐行渐宽,前景光明。

2021 年,证监会发布《证券期货业科技发展“十四五”规划》,主要围绕“推进证券期货行业数字化转型发展” 与“数据让监管更加智慧”两大主线,旨在依托新一代信息技术,建设敏捷高效可复用的新一代数字技术基础设施,提升核心架构安全可控水平,为业务数字化创新提供高效的一体化服务支撑。

为适应国内外期货市场不断变化,及时满足和响应业务发展需求,国泰君安期货(以下简称“国君期货”)将金融科技上升为公司战略,加快公司数字化转型,推动公司业务模式、服务模式和工作模式的创新发展。

图片

期货行业对于业务的连续性和低延时都有着较高的要求,无论是期货交易还是客户服务,现有的 IT 基础架构已无法满足不断变化的业务应用场景需求。如:量化交易、实时分析、精细化运营、消息推送、个性化服务等。

目前传统期货业 IT 架构面临着诸多问题和挑战。主要体现在以下几个方面:系统大多分散维护,烟囱式发展,导致统一架构规划困难,缺乏资源弹性管理基础;系统紧耦合,导致新功能开发周期长工作量大、业务故障恢复周期长;数据平台建设与业务发展存在鸿沟,业务和技术融合不畅;缺乏数据治理手段,数据孤岛问题日趋严峻。

图片

针对上述挑战,国君期货近年来积极主动与国产厂商深度合作,针对服务器、数据库、操作系统、应用软件等产品进行技术研究,探索新一代业务系统向分布式架构转型。

图片

在传统 IT 架构向国产分布式架构转型过程中,数据库架构的转型是十分关键的一环。国君期货原有的数据库多为集中式数据库。随着业务量的增加和交易方式的演变, 人均智能设备使用越来越多,期货业产生的数据量呈几何级增长。因此,对数据库的扩展性和处理能力提出了更高的要求,传统的单机和集中式数据库架构在应对海量数据并行处理中逐渐显露疲态与不足。

期货公司移动端线上零售业务的开展,需要通过消息通知等方式来主动触达客户,以促进用户留存和业务转化。以往,传统模式人工收集信息后依经验选择推送时机和目标用户,只能局限于粗放式小规模的推送运营,无法对场景和用户进行精细化识别,更无法完成个性化触达。智能推送系统通过对业务和用户数据的标准化治理以及下游规则引擎的搭建,实现了“搭积木”式的场景构建,当业务事件触发时,自动匹配用户准确发送消息,而无需人工进行干预。

国君期货智能推送系统单日数据增量已达亿级, 原基于 MySQL 的架构,已经无法满足实时写入、高并发查询、海量历史数据存储等业务需求。经过研究论证,国君期货将智能推送系统从旧的单体架构升级为可水平扩展的分布式架构,采用完全自研的国产原生分布式数据库 OceanBase+国产 ARM 服务器,替换掉原有的 MySQL 数据库+中高配 X86 服务器。

实现了垂直单体架构数据库向分布式数据库架构的平滑替换,采用分布式架构的智能推送系统,结合 OceanBase 分区级负载均衡能力, 使业务集群整体具备了高性能和高扩展性。在行情异动、账户风险率预警、持仓合约临近交割、异常交易预警等场景下充分发挥快速、精准的优势,显著提升用户体验,将业务部门从以往手工式通知联系客户的各种繁琐工作中解放出来。

图片

整体而言,基于国产硬件服务器、国产操作系统和分布式数据库 OceanBase 的智能推送系统,大幅度提升了业务服务能力和创新能力。为业务长期增长和实现关键基础设施自主可控的目标,打下坚实基础,,迈出了数字化转型的关键一步。

截止目前,国君期货已初步建成了以容器化、微服务、云平台、低代码框架、分布式存储、低延时互联互通网络为架构底座;以数据中台、业务中台为载体;以客户服务平台、营销管理平台、统一风险管理系统等为支撑,集研究、运营、办公为一体的高效协同综合服务平台。

随着数字化转型深入,未来国君期货将在基础架构稳健、运维监控体系完善的前提下,踏实做好业务数字化和智能化的迭代,持续提升精细化经营管理能力,运用金融科技赋能业务发展,在服务实体经济高质量发展和资本市场全面深化改革中展现新担当。

这篇关于国泰君安期货:基于分布式架构的智能推送系统,满足单日亿级消息处理量的文章就介绍到这儿,希望我们推荐的文章对编程师们有所帮助!



http://www.chinasem.cn/article/165905

相关文章

Nginx分布式部署流程分析

《Nginx分布式部署流程分析》文章介绍Nginx在分布式部署中的反向代理和负载均衡作用,用于分发请求、减轻服务器压力及解决session共享问题,涵盖配置方法、策略及Java项目应用,并提及分布式事... 目录分布式部署NginxJava中的代理代理分为正向代理和反向代理正向代理反向代理Nginx应用场景

Java 线程池+分布式实现代码

《Java线程池+分布式实现代码》在Java开发中,池通过预先创建并管理一定数量的资源,避免频繁创建和销毁资源带来的性能开销,从而提高系统效率,:本文主要介绍Java线程池+分布式实现代码,需要... 目录1. 线程池1.1 自定义线程池实现1.1.1 线程池核心1.1.2 代码示例1.2 总结流程2. J

linux系统中java的cacerts的优先级详解

《linux系统中java的cacerts的优先级详解》文章讲解了Java信任库(cacerts)的优先级与管理方式,指出JDK自带的cacerts默认优先级更高,系统级cacerts需手动同步或显式... 目录Java 默认使用哪个?如何检查当前使用的信任库?简要了解Java的信任库总结了解 Java 信

Spring Boot分层架构详解之从Controller到Service再到Mapper的完整流程(用户管理系统为例)

《SpringBoot分层架构详解之从Controller到Service再到Mapper的完整流程(用户管理系统为例)》本文将以一个实际案例(用户管理系统)为例,详细解析SpringBoot中Co... 目录引言:为什么学习Spring Boot分层架构?第一部分:Spring Boot的整体架构1.1

Rust 智能指针的使用详解

《Rust智能指针的使用详解》Rust智能指针是内存管理核心工具,本文就来详细的介绍一下Rust智能指针(Box、Rc、RefCell、Arc、Mutex、RwLock、Weak)的原理与使用场景,... 目录一、www.chinasem.cnRust 智能指针详解1、Box<T>:堆内存分配2、Rc<T>:

Oracle数据库在windows系统上重启步骤

《Oracle数据库在windows系统上重启步骤》有时候在服务中重启了oracle之后,数据库并不能正常访问,下面:本文主要介绍Oracle数据库在windows系统上重启的相关资料,文中通过代... oracle数据库在Windows上重启的方法我这里是使用oracle自带的sqlplus工具实现的方

JAVA实现亿级千万级数据顺序导出的示例代码

《JAVA实现亿级千万级数据顺序导出的示例代码》本文主要介绍了JAVA实现亿级千万级数据顺序导出的示例代码,文中通过示例代码介绍的非常详细,对大家的学习或者工作具有一定的参考学习价值,需要的朋友们下面... 前提:主要考虑控制内存占用空间,避免出现同时导出,导致主程序OOM问题。实现思路:A.启用线程池

Git打标签从本地创建到远端推送的详细流程

《Git打标签从本地创建到远端推送的详细流程》在软件开发中,Git标签(Tag)是为发布版本、标记里程碑量身定制的“快照锚点”,它能永久记录项目历史中的关键节点,然而,仅创建本地标签往往不够,如何将其... 目录一、标签的两种“形态”二、本地创建与查看1. 打附注标http://www.chinasem.cn

JWT + 拦截器实现无状态登录系统

《JWT+拦截器实现无状态登录系统》JWT(JSONWebToken)提供了一种无状态的解决方案:用户登录后,服务器返回一个Token,后续请求携带该Token即可完成身份验证,无需服务器存储会话... 目录✅ 引言 一、JWT 是什么? 二、技术选型 三、项目结构 四、核心代码实现4.1 添加依赖(pom

基于Python实现自动化邮件发送系统的完整指南

《基于Python实现自动化邮件发送系统的完整指南》在现代软件开发和自动化流程中,邮件通知是一个常见且实用的功能,无论是用于发送报告、告警信息还是用户提醒,通过Python实现自动化的邮件发送功能都能... 目录一、前言:二、项目概述三、配置文件 `.env` 解析四、代码结构解析1. 导入模块2. 加载环