开年的第一篇文章 - 关于系统开发的一些有用的中间件与工具包汇总

本文主要是介绍开年的第一篇文章 - 关于系统开发的一些有用的中间件与工具包汇总,希望对大家解决编程问题提供一定的参考价值,需要的开发者们随着小编来一起学习吧!

工具包

HPPC

High Performance Primitive Collections https://github.com/carrotsearch/hppc

Hutool

一个小而全的Java工具类库

EasyExcel

JAVA解析Excel工具EasyExcel https://github.com/alibaba/easyexcel/

pinyin4j

https://github.com/belerweb/pinyin4j

stream-lib

实时计算工具库 stream-lib 唯一值计算 HyperLogLog 集合成员测试 BloomFilter Top K 排名 CountMinSketch 分位数计算 T-Digest

Kryo

RPC之序列化篇

args4j

中间件

OpenFeign

  • OpenFeign简介及@FeignClient等注解的使用

apollo

首先,Apollo是我看到的文档很完善的中间件之一。
官网介绍:Apollo(阿波罗)是一款可靠的分布式配置管理中心,诞生于携程框架研发部,能够集中化管理应用不同环境、不同集群的配置,配置修改后能够实时推送到应用端,并且具备规范的权限、流程治理等特性,适用于微服务配置管理场景。服务端基于Spring Boot和Spring Cloud开发,打包后可以直接运行,不需要额外安装Tomcat等应用容器。

文档地址

不过,让我比较震惊的是,看到了下面这个。

[外链图片转存失败,源站可能有防盗链机制,建议将图片保存下来直接上传(img-0mNQxGIZ-1641190378214)(C:\Users\jm017775\AppData\Roaming\Typora\typora-user-images\image-20211229151246628.png)]

这个JSON如此熟悉,这不就是之前平安项目开发时,添加修改配置使用的JSON格式么?基本上可以断定平安的DEVOPS 配置管理是使用的类似Apollo的第三方应用接入的方式。

Canal

用途是基于 MySQL 数据库增量日志解析,提供增量数据订阅和消费

官网增量变更同步方案如下:
在这里插入图片描述

LogStash

Logstash 性能及其替代方案
[整理] 日志采集工具:Logstash、Filebeat、Fluentd、Logagent、rsyslog对比

DataX

DataX 是阿里开源的一个异构数据源离线同步工具,致力于实现包括关系型数据库(MySQL、Oracle等)、HDFS、Hive、ODPS、HBase、FTP等各种异构数据源之间稳定高效的数据同步功能。
DataX介绍以及优缺点分析

Kafka

Hive

HBase

Spark

Filnk

Flink详细介绍

ClickHouse

Redis

DolPhinScheduler

WebSocket

Presto

【Presto实现原理和美团的使用实践】
https://github.com/prestodb/f8-2019-demo

Hadoop

官网

【使用docker-compose创建hadoop集群】

注意:需要加端口映射,否则本地访问不了,

ports:

  • “127.0.0.1:50070:50070”

基于docker-compose的hive搭建
Presto Start https://prestodb.io/getting-started.html

MapReduce

MapReduce介绍

JAVA 基础

JMX https://www.jianshu.com/p/de85fad05dcb

RMI https://www.cnblogs.com/langtianya/p/4939077.html

[外链图片转存失败,源站可能有防盗链机制,建议将图片保存下来直接上传(img-XWsuwkDr-1641190378216)(C:\Users\jm017775\AppData\Roaming\Typora\typora-user-images\image-20211230153942569.png)]

这篇关于开年的第一篇文章 - 关于系统开发的一些有用的中间件与工具包汇总的文章就介绍到这儿,希望我们推荐的文章对编程师们有所帮助!



http://www.chinasem.cn/article/1007716

相关文章

PyQt5 GUI 开发的基础知识

《PyQt5GUI开发的基础知识》Qt是一个跨平台的C++图形用户界面开发框架,支持GUI和非GUI程序开发,本文介绍了使用PyQt5进行界面开发的基础知识,包括创建简单窗口、常用控件、窗口属性设... 目录简介第一个PyQt程序最常用的三个功能模块控件QPushButton(按钮)控件QLable(纯文本

Linux系统中查询JDK安装目录的几种常用方法

《Linux系统中查询JDK安装目录的几种常用方法》:本文主要介绍Linux系统中查询JDK安装目录的几种常用方法,方法分别是通过update-alternatives、Java命令、环境变量及目... 目录方法 1:通过update-alternatives查询(推荐)方法 2:检查所有已安装的 JDK方

Linux系统之lvcreate命令使用解读

《Linux系统之lvcreate命令使用解读》lvcreate是LVM中创建逻辑卷的核心命令,支持线性、条带化、RAID、镜像、快照、瘦池和缓存池等多种类型,实现灵活存储资源管理,需注意空间分配、R... 目录lvcreate命令详解一、命令概述二、语法格式三、核心功能四、选项详解五、使用示例1. 创建逻

基于Python开发一个图像水印批量添加工具

《基于Python开发一个图像水印批量添加工具》在当今数字化内容爆炸式增长的时代,图像版权保护已成为创作者和企业的核心需求,本方案将详细介绍一个基于PythonPIL库的工业级图像水印解决方案,有需要... 目录一、系统架构设计1.1 整体处理流程1.2 类结构设计(扩展版本)二、核心算法深入解析2.1 自

使用Python构建一个高效的日志处理系统

《使用Python构建一个高效的日志处理系统》这篇文章主要为大家详细讲解了如何使用Python开发一个专业的日志分析工具,能够自动化处理、分析和可视化各类日志文件,大幅提升运维效率,需要的可以了解下... 目录环境准备工具功能概述完整代码实现代码深度解析1. 类设计与初始化2. 日志解析核心逻辑3. 文件处

Spring Boot 结合 WxJava 实现文章上传微信公众号草稿箱与群发

《SpringBoot结合WxJava实现文章上传微信公众号草稿箱与群发》本文将详细介绍如何使用SpringBoot框架结合WxJava开发工具包,实现文章上传到微信公众号草稿箱以及群发功能,... 目录一、项目环境准备1.1 开发环境1.2 微信公众号准备二、Spring Boot 项目搭建2.1 创建

golang程序打包成脚本部署到Linux系统方式

《golang程序打包成脚本部署到Linux系统方式》Golang程序通过本地编译(设置GOOS为linux生成无后缀二进制文件),上传至Linux服务器后赋权执行,使用nohup命令实现后台运行,完... 目录本地编译golang程序上传Golang二进制文件到linux服务器总结本地编译Golang程序

Linux系统性能检测命令详解

《Linux系统性能检测命令详解》本文介绍了Linux系统常用的监控命令(如top、vmstat、iostat、htop等)及其参数功能,涵盖进程状态、内存使用、磁盘I/O、系统负载等多维度资源监控,... 目录toppsuptimevmstatIOStatiotopslabtophtopdstatnmon

SpringBoot开发中十大常见陷阱深度解析与避坑指南

《SpringBoot开发中十大常见陷阱深度解析与避坑指南》在SpringBoot的开发过程中,即使是经验丰富的开发者也难免会遇到各种棘手的问题,本文将针对SpringBoot开发中十大常见的“坑... 目录引言一、配置总出错?是不是同时用了.properties和.yml?二、换个位置配置就失效?搞清楚加

linux重启命令有哪些? 7个实用的Linux系统重启命令汇总

《linux重启命令有哪些?7个实用的Linux系统重启命令汇总》Linux系统提供了多种重启命令,常用的包括shutdown-r、reboot、init6等,不同命令适用于不同场景,本文将详细... 在管理和维护 linux 服务器时,完成系统更新、故障排查或日常维护后,重启系统往往是必不可少的步骤。本文