2017年10月27日
将数据写到kafka的topic
摘要： package test05import java.util.Propertiesimport org.apache.kafka.clients.producer.{KafkaProducer, ProducerRecord}import org.apache.spark.rdd.RDDimport 阅读全文
posted @ 2017-10-27 09:08 成长路上的。。。。 阅读(8886) 评论(0) 推荐(0) 编辑
将sparkStreaming结果保存到Redshift数据库
摘要： 1.保存到redshift数据库的代码 阅读全文
posted @ 2017-10-27 09:04 成长路上的。。。。 阅读(729) 评论(0) 推荐(0) 编辑
消费kafka的消息，并将其SparkStreaming结果保存到mysql
摘要： 将数据保存到mysql，需要用到jdbc。为了提高保存速度，我写了一个连接池 1.保存到mysql的代码 阅读全文
posted @ 2017-10-27 08:59 成长路上的。。。。 阅读(12345) 评论(1) 推荐(0) 编辑