服务器高并发,高QPS之拙见

2024-03-22 10:40
文章标签 服务器 并发 qps 拙见

本文主要是介绍服务器高并发,高QPS之拙见,希望对大家解决编程问题提供一定的参考价值,需要的开发者们随着小编来一起学习吧!

一般的互联网产品都会有并发或者高频查询(QPS)问题,今天分享一下我个人的拙见,欢迎讨论!
我个人遇到的问题主要有以下几点:

1、某些拳头活动(业务)拉新为保证超预期效果,遇到高并发问题
2、某些业务,C端用户对于B端的数据及时性需求很高,会遇到高QPS问题

假定程序环境为:Linux + java + nginx

针对第一点目前已知的较为友好、简单的解决方案有:
1、服务器做负载均衡
2、nginx和java设置每秒接纳请求数限定范围
3、服务器请求时间延长
(2、3没有太大必要,在保证服务器稳定提供服务的同时会损失一定的用户体验)
4、调整业务,尽量剥离出来一部分业务数据缓存(也就是加Redis等缓存技术)
5、添加行为验证,比如滑块验证等
(不建议添加此功能,因为硬手段可以一定程度上缓解服务器压力,但是会用户体验会有较大折损)

针对第二点目前已知的较为友好、简单的解决方案有:
1、拆分业务,使用较为稳定的缓存服务,但是频繁查改缓存在保证服务的同时会加大服务器负荷
2、nginx和java设置每秒接纳请求数限定范围
3、服务器请求时间延长

上面是一些较为简单,对开发相对友好的解决方案,从现在非同一跑道内的一二线产品来看,缓存技术应用足矣解决很大部分的并发问题,在产品前期足够用,但是中后期上限很明显,最明显的就是在产品长期存在高QPS的情况下,此种方式会引引起缓存崩溃,进而引发磁盘I/O拉满,以下介绍几种架构级别的解决方案,大家可以探讨以下,有不足之处欢迎指正。

因为发展到一定程度之后,程序的性能瓶颈主要在数据库的 I/O 上,所以对于一些代码、设计上的优化(数据库主键,循环,死锁,事务,算法,单业务打开数据库次数、等)这里就不再赘述。

以下B端可以理解为高频写入业务,C端为高频读取业务,不一定要按照传统意义上的B、C端来界定业务作用

a)、数据库读写分离,如下图:
读写分离简单架构
即把业务拆分为读、写两块,具体工作原理为:

1、拆分之后的业务采用微服务的方式分别部署(也可以不分服务器,只分库
2、B端写入数据时写入业务1(写入)服务器,通过数据同步 把从数据库数据同步至主数据库,C端主要操作业务2(读取)服务器
3、可以按需把写入服务器或者读取服务器做一个服务器集群,用负载均衡进行管理(如果资源允许,用分布式部署能更好的均匀平摊请求,很大程度上缓解服务器压力)

此种方法好处是很大程度上缓解了并发带来的压力,能硬抗一定程度的并发。从现在非同一跑道内的一二线产品来看,足矣,但是也会有一些局限性,最典型的一个问题就是 write after Read 在C端读取数据及时性要求较高的业务上,会存在写晚于读的情况,而且对于分库之后缓存的使用就会有一定的限制,比如跨服务器、数据同步、不易维护等问题。

b)、垂直分库,如下图:
垂直分库
即把数据库根据业务进行拆分,数据存入不同的业务库中,大致工作原理为:

1、根据不同的业务,拆分数据库,程序拆分为微服务采用分布式部署(也可以只用单台服务器,也可分别独立部署)
(切记,拆分业务务必明确且有规划性,否则会导致后面业务扩展时增加大量的跨库查询)
2、此种架构工作原理简单,分业务存储,需要时进行跨库查询数据(尽量减少此种操作),高并发业务、高QPS业务可以使用负载均衡或者缓存技术,也可以针对性提升硬件环境或者集群大小避免造成服务器资源分配不均

此种方法好处很明显,就是避免了服务器资源分配不均问题,可以从硬件上补足某些特定业务的不足,且能有效的降低高QPS带来的高I/O压力。坏处也很明显,就是对业务扩展有很大的限制性,因为跨业务就代表着跨库,跨库耗费的资源在非高频业务来说影响不大,但是对于高频业务打击是致死性的。比较考验架构师对业务的理解程度和整体开发团队经验。如果采用此种方式,基本可以满足企业所需。

c)、水平分库,如下图:
水平分库
水平分库与垂直分库从架构设计上来说是一样的,不同的是分库规则。大致工作原理为:

1、重构业务逻辑,把某些有关联的数据确定一个主体,按照一定的规则,(比如主体的主键生成规则)存入到某个库,即这种分库操是单纯的把数据分开存储

此种方法原理也很简单,他跟垂直分库原理相悖,可以减少跨业务导致的跨库操作,但是在多主体数据联合展示时需要打开多个数据库连接,也会损失一定的效率。可以根据公司业务选择两种方式的其中一种

d)、nosql
此种方法适合产品前期研发,完全重构代码代价过大(我个人不推荐完全重构)

工作原理,使用非传统的关系型数据库做数据存储用。重构的话,如果业务复杂,损伤过大。

此技术还未完全成熟,在此写上仅做参考,可行性待研究。

大家可以探讨以下,一起进步

这篇关于服务器高并发,高QPS之拙见的文章就介绍到这儿,希望我们推荐的文章对编程师们有所帮助!



http://www.chinasem.cn/article/835132

相关文章

Web服务器-Nginx-高并发问题

《Web服务器-Nginx-高并发问题》Nginx通过事件驱动、I/O多路复用和异步非阻塞技术高效处理高并发,结合动静分离和限流策略,提升性能与稳定性... 目录前言一、架构1. 原生多进程架构2. 事件驱动模型3. IO多路复用4. 异步非阻塞 I/O5. Nginx高并发配置实战二、动静分离1. 职责2

Linux搭建ftp服务器的步骤

《Linux搭建ftp服务器的步骤》本文给大家分享Linux搭建ftp服务器的步骤,本文通过图文并茂的形式给大家介绍的非常详细,对大家的学习或工作具有一定的参考借鉴价值,需要的朋友参考下吧... 目录ftp搭建1:下载vsftpd工具2:下载客户端工具3:进入配置文件目录vsftpd.conf配置文件4:

Spring Security 前后端分离场景下的会话并发管理

《SpringSecurity前后端分离场景下的会话并发管理》本文介绍了在前后端分离架构下实现SpringSecurity会话并发管理的问题,传统Web开发中只需简单配置sessionManage... 目录背景分析传统 web 开发中的 sessionManagement 入口ConcurrentSess

Linux查询服务器 IP 地址的命令详解

《Linux查询服务器IP地址的命令详解》在服务器管理和网络运维中,快速准确地获取服务器的IP地址是一项基本但至关重要的技能,下面我们来看看Linux中查询服务器IP的相关命令使用吧... 目录一、hostname 命令:简单高效的 IP 查询工具命令详解实际应用技巧注意事项二、ip 命令:新一代网络配置全

Python开发简易网络服务器的示例详解(新手入门)

《Python开发简易网络服务器的示例详解(新手入门)》网络服务器是互联网基础设施的核心组件,它本质上是一个持续运行的程序,负责监听特定端口,本文将使用Python开发一个简单的网络服务器,感兴趣的小... 目录网络服务器基础概念python内置服务器模块1. HTTP服务器模块2. Socket服务器模块

Linux查询服务器系统版本号的多种方法

《Linux查询服务器系统版本号的多种方法》在Linux系统管理和维护工作中,了解当前操作系统的版本信息是最基础也是最重要的操作之一,系统版本不仅关系到软件兼容性、安全更新策略,还直接影响到故障排查和... 目录一、引言:系统版本查询的重要性二、基础命令解析:cat /etc/Centos-release详

Python WSGI HTTP服务器Gunicorn使用详解

《PythonWSGIHTTP服务器Gunicorn使用详解》Gunicorn是Python的WSGI服务器,用于部署Flask/Django应用,性能高且稳定,支持多Worker类型与配置,可处... 目录一、什么是 Gunicorn?二、为什么需要Gunicorn?三、安装Gunicorn四、基本使用启

MySQL中处理数据的并发一致性的实现示例

《MySQL中处理数据的并发一致性的实现示例》在MySQL中处理数据的并发一致性是确保多个用户或应用程序同时访问和修改数据库时,不会导致数据冲突、数据丢失或数据不一致,MySQL通过事务和锁机制来管理... 目录一、事务(Transactions)1. 事务控制语句二、锁(Locks)1. 锁类型2. 锁粒

通过配置nginx访问服务器静态资源的过程

《通过配置nginx访问服务器静态资源的过程》文章介绍了图片存储路径设置、Nginx服务器配置及通过http://192.168.206.170:8007/a.png访问图片的方法,涵盖图片管理与服务... 目录1.图片存储路径2.nginx配置3.访问图片方式总结1.图片存储路径2.nginx配置

深入解析Java NIO在高并发场景下的性能优化实践指南

《深入解析JavaNIO在高并发场景下的性能优化实践指南》随着互联网业务不断演进,对高并发、低延时网络服务的需求日益增长,本文将深入解析JavaNIO在高并发场景下的性能优化方法,希望对大家有所帮助... 目录简介一、技术背景与应用场景二、核心原理深入分析2.1 Selector多路复用2.2 Buffer