2020年6月10日
spark streaming向RDD和DataFrame转换
摘要： Data streaming转为DataFrame，不能直接一步转到DF，需要先转为RDD，然后再转到DF，我们用流式处理数据后，再通过spark sql实时获取我们想要的结果。 1.首先老规矩，创建spark上下文对象，spark SQL和spark Streaming，再创建个socket在Li 阅读全文
posted @ 2020-06-10 22:08 会飞的猪、li 阅读(1376) 评论(0) 推荐(0) 编辑