flink入门(一)——基本原理与应用场景
2024-09-07 06:33:45
一、简介
1.简介
flink是一个开源的分布式流处理框架
优势:高性能处理、高度灵活window操作、有状态计算的Exactly-once等
详情简介,参考官网:https://flink.apache.org/flink-architecture.html
中文参考:https://flink.apache.org/zh/flink-architecture.html
flink组件介绍:
1)部署:支持本地、集群(支持yarn资源管理)、云
2)核心层:提供了计算的核心
3)API:提供了面向流处理的DataStream和面向批处理的DataSet
4)类库:支持Table/SQL
基本架构为 DataSource(数据源) -> Transfromation(算子处理数据) ->DataSink(数据目的)
2.框架对比:
checkpoint就是检查点的意思,在重要位置设置检查点(快照),实现容错!https://blog.csdn.net/qq_39532946/article/details/78306809
最新文章
- MapReduce
- 引用Microsoft.Office.Interop.Excel出现的问题
- linux命令(6):rmdir 命令
- javascript (js)判断手机号码中国移动、中国联通、中国电信
- IOS开发中返回值为null时的处理
- sql server查询数据库中所有表的行数
- UVA 11795
- Nhibernate3.3.3sp1基础搭建测试
- 函数lock_rec_get_nth_bit
- 正确配置jstl的maven依赖,jar包冲突的问题终于解决啦
- SQL基础使用
- python 作用域(LEGB)
- NIO(生活篇)
- Java基础系列--08_集合1
- linux 之挂载和解压
- API(三)之Class-based Views
- npm 包管理器的使用
- [UE4]AIPerception,AI感知
- 解决linux下不生成core dump文件
- poj1953 World Cup Noise
热门文章
- Python包模块化调用方式详解
- MySQL/MariaDB数据库的用户和权限管理
- spriingboot使用thymeleaf
- python笔记37-史上最好用的发邮件zmail
- Python 生成 JWT(json web token) 及 解析方式
- HBase学习笔记之HBase的安装和配置
- 一个Tomcat下部署多个项目异常:org.springframework.jmx.export.UnableToRegisterMBeanException: Unable to register MBean 的解决方法
- [CodeForces 663E] - Binary Table(FWT)
- 斜率优化板题 HDU2829 Lawrence
- zzulioj - 2619: 小新的信息统计