2017年6月18日
创建spark_读取数据
摘要： 在2.0版本之前，使用Spark必须先创建SparkConf和SparkContext，不过在Spark2.0中只要创建一个SparkSession就够了，SparkConf、SparkContext和SQLContext都已经被封装在SparkSession当中。 在与spark2.0交互之前必须 阅读全文
posted @ 2017-06-18 14:36 彩色条纹小斑马 阅读(1023) 评论(0) 推荐(0) 编辑
Scala api 通过scan读取hbase表
该文被密码保护。 阅读全文
posted @ 2017-06-18 14:07 彩色条纹小斑马 阅读(0) 评论(0) 推荐(0) 编辑
spark获取时间
摘要： 在spark 中获取时间用到java.util.{Calendar,Date} 以及java.text.SimpleDateFormat来对时间输出格式作规范 首先先导入包 获取当前时间 调用该函数得到的结果为 2017-06-16 09:57:16 当想要获取非今天时间或者年份，月份，日期，小时， 阅读全文
posted @ 2017-06-18 12:42 彩色条纹小斑马 阅读(4956) 评论(0) 推荐(1) 编辑