01_Apache Flink是什么,Apache Flink的优势,Apache Flink用户,Flink介绍(流场景使用案例、正确性保证、API分层体系、Operational Focus等)

本文主要是介绍01_Apache Flink是什么,Apache Flink的优势,Apache Flink用户,Flink介绍(流场景使用案例、正确性保证、API分层体系、Operational Focus等),希望对大家解决编程问题提供一定的参考价值,需要的开发者们随着小编来一起学习吧!

1.1. Apache Flink是什么?
1.1.1. Apache Flink的优势
1.1.2. Apache Flink用户
1.1.3. Flink介绍
1.1.3.1.流场景使用案例
1.1.3.2.正确性保证
1.1.3.3. API分层体系
1.1.3.4. Operational Focus
1.1.3.5. 适用于各种应用场景Scales to any use case
1.1.3.6.高性能

1.1.Apache Flink是什么?

作为没有接触过Flink的人,当听到外界说的Flink的时候,就想知道它能做什么,作为笔者,同样有这样的疑问,为了消除疑问,我也迫不及待的在下班后开始了看官网的学习历程。

Apache Flink官网:https://flink.apache.org/

Apache Flinke是一个”统一的大数据分析和机器学习引擎”、”统一的大数据分析和流计算引擎”、”统一的大数据分析和批计算引擎”

Flink说自己是”下一代大数据处理引擎”,看来海口夸的很大啊,称自己是”下一代”。作为Apache Flink小白的我是不明觉厉啊。好吧,我到底要看看它是多么牛逼。以下是Apache Flink的一段介绍:
“Apache Flink是一个分布式大数据处理引擎,可对有限数据流和无线数据流进行状态计算。可部署在各种集群环境,对各种大小的数据规模进行快速计算”。

盗用它的一张图,来瞅瞅它:
在这里插入图片描述

1.1.1.Apache Flink的优势

Apache Flink 为用户提供了更强大的计算能力和更易用的编程接口。优势项有:

批流统一:Runtime 和 SQL层批流统一,提供高吞吐延迟计算能力和更强大的SQL支持。
生态兼容:与Hadoop Yarn / Apache Mesos / Kubernetes集成,并且支持单机模式运行。
性能卓越:性能卓越的批处理与流处理支持。
规模计算:作业可被分解成上千个任务,分布在集群中并发执行。

1.1.2.Apache Flink用户

Apache Flink的用户有:阿里巴巴,腾讯,华为,网易,滴滴,饿了么,携程,360,顺丰科技,爱奇艺,美团,唯品会,ebay,ERICSSON.

1.1.3.Flink介绍

1.1.3.1.流场景使用案例

数据驱动的应用
批流数据分析
数据通道和ETL (更多:https://flink.apache.org/usecases.html)

1.1.3.2.正确性保证

Exactly-once状态一致性保证
事件时间处理
复杂的late date处理(更多:https://flink.apache.org/flink-applications.html#building-blocks-for-streaming-applications)

1.1.3.3. API分层体系

统一SQL支持Stream和Batch数据处理
DataSteam API & DataSet API
ProcessFunction(Time & State)(更多:https://flink.apache.org/flink-applications.html#layered-apis)

1.1.3.4. Operational Focus

部署灵活
高可用配置
Savepoint (更多:https://flink.apache.org/flink-operations.html)

1.1.3.5. 适用于各种应用场景Scales to any use case

架构可扩展
超大state支持
增量checkpointing (更多:https://flink.apache.org/flink-architecture.html#run-applications-at-any-scale)

1.1.3.6.高性能

低延时
高吞吐
内存计算(更多:https://flink.apache.org/flink-architecture.html#leverage-in-memory-performance)

这篇关于01_Apache Flink是什么,Apache Flink的优势,Apache Flink用户,Flink介绍(流场景使用案例、正确性保证、API分层体系、Operational Focus等)的文章就介绍到这儿,希望我们推荐的文章对编程师们有所帮助!



http://www.chinasem.cn/article/918148

相关文章

Python使用FastAPI实现大文件分片上传与断点续传功能

《Python使用FastAPI实现大文件分片上传与断点续传功能》大文件直传常遇到超时、网络抖动失败、失败后只能重传的问题,分片上传+断点续传可以把大文件拆成若干小块逐个上传,并在中断后从已完成分片继... 目录一、接口设计二、服务端实现(FastAPI)2.1 运行环境2.2 目录结构建议2.3 serv

MyBatis分页查询实战案例完整流程

《MyBatis分页查询实战案例完整流程》MyBatis是一个强大的Java持久层框架,支持自定义SQL和高级映射,本案例以员工工资信息管理为例,详细讲解如何在IDEA中使用MyBatis结合Page... 目录1. MyBATis框架简介2. 分页查询原理与应用场景2.1 分页查询的基本原理2.1.1 分

Spring Security简介、使用与最佳实践

《SpringSecurity简介、使用与最佳实践》SpringSecurity是一个能够为基于Spring的企业应用系统提供声明式的安全访问控制解决方案的安全框架,本文给大家介绍SpringSec... 目录一、如何理解 Spring Security?—— 核心思想二、如何在 Java 项目中使用?——

springboot中使用okhttp3的小结

《springboot中使用okhttp3的小结》OkHttp3是一个JavaHTTP客户端,可以处理各种请求类型,比如GET、POST、PUT等,并且支持高效的HTTP连接池、请求和响应缓存、以及异... 在 Spring Boot 项目中使用 OkHttp3 进行 HTTP 请求是一个高效且流行的方式。

防止Linux rm命令误操作的多场景防护方案与实践

《防止Linuxrm命令误操作的多场景防护方案与实践》在Linux系统中,rm命令是删除文件和目录的高效工具,但一旦误操作,如执行rm-rf/或rm-rf/*,极易导致系统数据灾难,本文针对不同场景... 目录引言理解 rm 命令及误操作风险rm 命令基础常见误操作案例防护方案使用 rm编程 别名及安全删除

Java使用Javassist动态生成HelloWorld类

《Java使用Javassist动态生成HelloWorld类》Javassist是一个非常强大的字节码操作和定义库,它允许开发者在运行时创建新的类或者修改现有的类,本文将简单介绍如何使用Javass... 目录1. Javassist简介2. 环境准备3. 动态生成HelloWorld类3.1 创建CtC

使用Python批量将.ncm格式的音频文件转换为.mp3格式的实战详解

《使用Python批量将.ncm格式的音频文件转换为.mp3格式的实战详解》本文详细介绍了如何使用Python通过ncmdump工具批量将.ncm音频转换为.mp3的步骤,包括安装、配置ffmpeg环... 目录1. 前言2. 安装 ncmdump3. 实现 .ncm 转 .mp34. 执行过程5. 执行结

Java使用jar命令配置服务器端口的完整指南

《Java使用jar命令配置服务器端口的完整指南》本文将详细介绍如何使用java-jar命令启动应用,并重点讲解如何配置服务器端口,同时提供一个实用的Web工具来简化这一过程,希望对大家有所帮助... 目录1. Java Jar文件简介1.1 什么是Jar文件1.2 创建可执行Jar文件2. 使用java

C#使用Spire.Doc for .NET实现HTML转Word的高效方案

《C#使用Spire.Docfor.NET实现HTML转Word的高效方案》在Web开发中,HTML内容的生成与处理是高频需求,然而,当用户需要将HTML页面或动态生成的HTML字符串转换为Wor... 目录引言一、html转Word的典型场景与挑战二、用 Spire.Doc 实现 HTML 转 Word1

PHP应用中处理限流和API节流的最佳实践

《PHP应用中处理限流和API节流的最佳实践》限流和API节流对于确保Web应用程序的可靠性、安全性和可扩展性至关重要,本文将详细介绍PHP应用中处理限流和API节流的最佳实践,下面就来和小编一起学习... 目录限流的重要性在 php 中实施限流的最佳实践使用集中式存储进行状态管理(如 Redis)采用滑动