摘要: 折腾了好几天,终于搞定了Flink run提交参数,记录一下。 背景: 之前一直报错,akka,AskTimeoutException,尝试添加akka.ask.timeout=120000s, 依然显示该错误。 后来在Flink官网找到了该参数的赋值方式,注意这里有个大坑,数字和时间单位之间,必须 阅读全文
posted @ 2020-09-02 22:54 凝望远处的天鹅 阅读(5075) 评论(0) 推荐(0) 编辑
摘要: 今天用SparkSQL保存一份json数据的时候,引号被转义了,并用括号包起来了,导致下游新来的小伙伴无法处理这份数据。 保存后的数据长这样(用\t分割): data "{\"key\": \"impl\", \"version\": \"1.0\"}" 于是乎一番查找Spark文档,尝试添加这个选 阅读全文
posted @ 2020-09-02 22:38 凝望远处的天鹅 阅读(2191) 评论(1) 推荐(0) 编辑