Flink学习笔记,持续更新。。。
暂时先学习Hadoop。。
basic | ||
Flink_SQL | ||
hudi | ||
rocksdb | ||
source_code | ||
常见问题 | ||
调优 | ||
.imgbotconfig | ||
LICENSE | ||
README.md | ||
reference.md |
简介
本项目用于学习Flink所做的笔记,便于以后查看复习。此项目适合我这种虽然比较菜,且爱学习的人学习。
内存调优
目录
常见故障排除
目录
Flink SQL
Flink SQL学习笔记提纲。持续更新。Hive SQL 离线Join VS Flink SQL 双流Join。
对比维度 | Hive SQL离线Join | Flink SQL双流Join |
---|---|---|
数据源 | 有界(离线数据) | 无界(实时数据) |
计算次数 | 一次 | 持续计算 |
计算结果 | 有界(离线数据) | 无界(实时数据) |
计算驱动 | 单边驱动 | 双边驱动 |
目录
基础知识
FLink基础知识
- Flink CEP
- 旁路输出
- Flink Operator Chain
- slot相关
- Checkpoint相关
- Flink基本架构
- SavePoint相关
- BlobServer相关
- RocksDB相关
Flink On Hudi
Flink 源码
源码编译可以使用下面命令
mvn install -DskipTests -Dfast -Dpmd.skip=true -Dcheckstyle.skip=true \
-Dmaven.javadoc.skip=true -Dmaven.compile.fork=true
缺的包可以在 https://conjars.org/repo/org/pentaho/pentaho-aggdesigner-core/5.1.5-jhyde/
https://packages.confluent.io/maven/io/confluent/kafka-schema-registry-client/7.2.2/ 下面找到。