10 2019 档案

flink idea 打包jar 并放到集群上运行
摘要：flink idea 打包jar 并放到集群上运行 在开始之前注意前提，当前项目的scala的版本要和集群上的scala一致 我已经创建好一个wordCount的flink项目 注意项目的pom文件给这些依赖加上<scope>provided</scope>（表示执行和打包都不用此依赖，只有编译时用 阅读全文
posted @ 2019-10-31 09:30 夏天换上冬装 阅读(15304) 评论(0) 推荐(2) 编辑
flink on yarn启动失败
摘要：我启动hadoop on yarn 集群后 [root@node1 flink-1.6.1]# ./bin/yarn-session.sh -n 2 -jm 1024 -tm 1024 报的如下错误 1 Caused by: org.apache.flink.yarn.AbstractYarnClu 阅读全文
posted @ 2019-10-24 15:51 夏天换上冬装 阅读(11849) 评论(0) 推荐(0) 编辑
Flink开发-IDEA scala开发环境搭建
摘要：现在大数据相关服务，越来越倾向于使用scala语言，scala函数式编程的优势我不多赘述。最明显的一个优点，代码简洁。看个WordCount实现对比： Java版WordCount 1 ExecutionEnvironment env = ExecutionEnvironment.getExecut 阅读全文
posted @ 2019-10-22 17:00 夏天换上冬装 阅读(6329) 评论(0) 推荐(0) 编辑