记录第一次突发情况

2024-06-17 17:20
文章标签 记录 情况 第一次 突发

本文主要是介绍记录第一次突发情况,希望对大家解决编程问题提供一定的参考价值,需要的开发者们随着小编来一起学习吧!

项目场景:

这台云服务器主要是我学习在用,也不是很大,2核2g3M40G硬盘。
在这台服务器上,我主要使用了docker并且把所有的东西,都通过docker安装,比如MySQL,redis, elasticsearch。


问题描述

我正在配置MySQL的binlog,配置完成之后,突然就开始高负载,内存和cpu都跑满了。

在这里插入图片描述
因为是第一次遇到,所以经验不足。


解决过程描述:

一般这种跑满的情况,因为我是自己用的服务器,MySQL和redis就算对外开放也设置的有密码。所以我个人认为,要么就是MySQL出了问题,要么就是有人对服务器进行攻击。但是我目前还不清楚是哪个原因。

9点多的时候,服务器爆满
在这里插入图片描述
我使用的阿里云服务器,阿里云服务器有更详细的服务器监控功能,我傻傻的不知道。

看到爆满之后,我首先使用了1panel尝试关闭MySQL,但是因为爆满了,动都动不了,后面我又尝试使用命令行来关,但是也是关不掉。

这个时候,我就立即进行了重启,并尝试重新连接,但是还是连接不上去。

之后,我就认为是MySQL出了问题,没有太多关注服务器,就一直尝试连接服务器,偶然的能连上了,但是很卡,因为我认为是MySQL出了问题,并且我的全部东西都在docker上,我就开始尝试关闭MySQL。输入docker ps,过了有十几分钟才有反应,找到了MySQL对应的id,就输入对应stop命令,就开始等,希望他有反应,又等了二十多分钟,还是没有反应。

在等了二十多分钟之后,我打开了阿里云的监控,我才发现CPU的爆满的,内存是爆满的,网络有两个高峰,连接也就几个高的峰的,硬盘的运行也异常。这个时候,就觉得不正常,再次重启,马上尝试连接,连进去了。这个时候就想去找什么占用了服务器资源。

首先输入了ps -ef ,没有找到
然后输入mem,没有这个命令
然后输入了top,发现java占用资源很高。
在这里插入图片描述
到这个时候,我就真的挺懵的,因为我不记得我在服务器上安装了java,并且还有多个java。

然后我就让kimi生成找到cpu占用最高的进程ps -eo pid,ppid,comm,%cpu --sort=-%cpu

在这里插入图片描述
到这个时候,服务器就又卡起来了,那没事,重启,再重新连接。

在重启的间隙,我在想我应该怎么解决。
首先,想到的是1panel,因为我的东西都是通过1panel安装,就想先关了1panel,然后我又想到我所有的东西,都在docker上, 就决定直接先试试关1panel,1panel关了没有用就关MySQL,关MySQL没用就关docker。

重启好了,马上重连,还是先找的最大占用的进程,因为真的太卡了,我就想能不能先把这些java给kill掉,然后就开始kill,但是kill之后,java又重新出现了,并且占用比之前还高
在这里插入图片描述
于是我的就再次kill,并趁着不卡,关闭1panel,但是无济于事。
于是就再次,重启,重连,ps找到java对应的pid,kill,然后就直接关闭docker。顿时,所有的异常就都下来了。下面就是监控,整个过程全部的图。

cpu使用率
在这里插入图片描述
内存使用率
在这里插入图片描述
系统负载
在这里插入图片描述
实例云磁盘读写BPS
在这里插入图片描述
实例云盘IOPS
在这里插入图片描述
公网带宽
在这里插入图片描述
内网带宽
在这里插入图片描述
ECS同时连接数
在这里插入图片描述


解决方案:

真的要熟悉linux的常见的操作,我突发的时候就很懵,linux的一些操作我都很久没看了,还好现在有chatGPT之类的能很快的帮我找到相关命令。

然后如果数据相关的是通过docker下到服务器的,docker的相关操作也要熟练、不然你就会在紧急情况下,去百度,去GPT就很狼狈。

下面我总结我当时用到的命令。

linux
在这里插入图片描述
查看资源的使用情况
在这里插入图片描述
查看进程使用cpu的前几名
在这里插入图片描述
1panel的关闭命令
在这里插入图片描述

kill掉相关进程,后面的数字是pid
在这里插入图片描述
关闭docker

在这里插入图片描述
docker

在这里插入图片描述
docker stop ed

这篇关于记录第一次突发情况的文章就介绍到这儿,希望我们推荐的文章对编程师们有所帮助!



http://www.chinasem.cn/article/1070068

相关文章

在Spring Boot中集成RabbitMQ的实战记录

《在SpringBoot中集成RabbitMQ的实战记录》本文介绍SpringBoot集成RabbitMQ的步骤,涵盖配置连接、消息发送与接收,并对比两种定义Exchange与队列的方式:手动声明(... 目录前言准备工作1. 安装 RabbitMQ2. 消息发送者(Producer)配置1. 创建 Spr

k8s上运行的mysql、mariadb数据库的备份记录(支持x86和arm两种架构)

《k8s上运行的mysql、mariadb数据库的备份记录(支持x86和arm两种架构)》本文记录在K8s上运行的MySQL/MariaDB备份方案,通过工具容器执行mysqldump,结合定时任务实... 目录前言一、获取需要备份的数据库的信息二、备份步骤1.准备工作(X86)1.准备工作(arm)2.手

SpringBoot3应用中集成和使用Spring Retry的实践记录

《SpringBoot3应用中集成和使用SpringRetry的实践记录》SpringRetry为SpringBoot3提供重试机制,支持注解和编程式两种方式,可配置重试策略与监听器,适用于临时性故... 目录1. 简介2. 环境准备3. 使用方式3.1 注解方式 基础使用自定义重试策略失败恢复机制注意事项

Python UV安装、升级、卸载详细步骤记录

《PythonUV安装、升级、卸载详细步骤记录》:本文主要介绍PythonUV安装、升级、卸载的详细步骤,uv是Astral推出的下一代Python包与项目管理器,主打单一可执行文件、极致性能... 目录安装检查升级设置自动补全卸载UV 命令总结 官方文档详见:https://docs.astral.sh/

统一返回JsonResult踩坑的记录

《统一返回JsonResult踩坑的记录》:本文主要介绍统一返回JsonResult踩坑的记录,具有很好的参考价值,希望对大家有所帮助,如有错误或未考虑完全的地方,望不吝赐教... 目录统一返回jsonResult踩坑定义了一个统一返回类在使用时,JsonResult没有get/set方法时响应总结统一返回

Go学习记录之runtime包深入解析

《Go学习记录之runtime包深入解析》Go语言runtime包管理运行时环境,涵盖goroutine调度、内存分配、垃圾回收、类型信息等核心功能,:本文主要介绍Go学习记录之runtime包的... 目录前言:一、runtime包内容学习1、作用:① Goroutine和并发控制:② 垃圾回收:③ 栈和

java对接海康摄像头的完整步骤记录

《java对接海康摄像头的完整步骤记录》在Java中调用海康威视摄像头通常需要使用海康威视提供的SDK,下面这篇文章主要给大家介绍了关于java对接海康摄像头的完整步骤,文中通过代码介绍的非常详细,需... 目录一、开发环境准备二、实现Java调用设备接口(一)加载动态链接库(二)结构体、接口重定义1.类型

apache的commons-pool2原理与使用实践记录

《apache的commons-pool2原理与使用实践记录》ApacheCommonsPool2是一个高效的对象池化框架,通过复用昂贵资源(如数据库连接、线程、网络连接)优化系统性能,这篇文章主... 目录一、核心原理与组件二、使用步骤详解(以数据库连接池为例)三、高级配置与优化四、典型应用场景五、注意事

SpringBoot实现文件记录日志及日志文件自动归档和压缩

《SpringBoot实现文件记录日志及日志文件自动归档和压缩》Logback是Java日志框架,通过Logger收集日志并经Appender输出至控制台、文件等,SpringBoot配置logbac... 目录1、什么是Logback2、SpringBoot实现文件记录日志,日志文件自动归档和压缩2.1、

qtcreater配置opencv遇到的坑及实践记录

《qtcreater配置opencv遇到的坑及实践记录》我配置opencv不管是按照网上的教程还是deepseek发现都有些问题,下面是我的配置方法以及实践成功的心得,感兴趣的朋友跟随小编一起看看吧... 目录电脑环境下载环境变量配置qmake加入外部库测试配置我配置opencv不管是按照网上的教程还是de