文件名称:flink-learn:学习Flink
文件大小:262KB
文件格式:ZIP
更新时间:2024-02-18 11:15:34
sql stream bigdata flink SQLJava
Flink学习
Flink
Scala版本
卡夫卡版
1.10.0
2.11+
0.10+
Maven 模板 : https://www.mvnjar.com/org.apache.flink/flink-quickstart-scala/jar.html
注意 : 当在idea上调试时,先将 es-shade install。然后 ignore Project:es-shade ;否则有冲突问题
Flink提交
!:1.10之后去掉 -yn ,加上会报错
1:单独资源: flink run -m yarn-cluster --yarnname _wc -p 5 -yjm 1024 -ytm 1024 -ys 2 WordCount.jar
2:共享空间: yarn-session.sh -n 5 -jm 1024 -tm 1024 -s 2 // 在yarn提前开辟一个资源空间 application_1567318548013_0001。
在开辟的空间上提交任务: flink run -m yarn-cluster --yarnname flink_wc