摘要:
折腾了好几天,终于搞定了Flink run提交参数,记录一下。 背景: 之前一直报错,akka,AskTimeoutException,尝试添加akka.ask.timeout=120000s, 依然显示该错误。 后来在Flink官网找到了该参数的赋值方式,注意这里有个大坑,数字和时间单位之间,必须 阅读全文
摘要:
今天用SparkSQL保存一份json数据的时候,引号被转义了,并用括号包起来了,导致下游新来的小伙伴无法处理这份数据。 保存后的数据长这样(用\t分割): data "{\"key\": \"impl\", \"version\": \"1.0\"}" 于是乎一番查找Spark文档,尝试添加这个选 阅读全文