2018年9月25日
spark中序列化错误，sparkStreaming将wordcount单词统计结果插入mysql
摘要： 做spark开发错误 task不能序列化 18/09/25 14:47:35 ERROR JobScheduler: Error running job streaming job 1537858055000 ms.1org.apache.spark.SparkException: Task not 阅读全文
posted @ 2018-09-25 15:34 马鞍山 阅读(339) 评论(0) 推荐(0) 编辑
Centos7安装netcat运算sparkStreaming进行单词统计
摘要： 安装命令： yum install nc 监听端口 nc -l -k -p 6666 启动Sparkstreaming 程序 在监听端口 输出单词以空格切割 ，才程序运行端查看结果 阅读全文
posted @ 2018-09-25 00:05 马鞍山 阅读(176) 评论(0) 推荐(0) 编辑