2019 年 6月 19 日随笔档案 - drl_blogs

摘要： 1.8 1.8 2.11.8 2.2.2 2.7.3 8.0.11 ... 阅读全文

posted @ 2019-06-19 23:17 drl_blogs 阅读(1491) 评论(0) 推荐(0) 编辑

摘要：文章目录RDD转DataFrames方式一：直接指定列名和数据类型方式二：通过反射转换方式三：通过编程设置Schema（StructType）RDD转DataSetDataFr... 阅读全文

posted @ 2019-06-19 16:55 drl_blogs 阅读(2006) 评论(0) 推荐(0) 编辑

摘要：文章目录json文件中数据DataFrames创建DataFramesDSL风格printSchemaselectfiltergroupBySQL风格createOrRepla... 阅读全文

posted @ 2019-06-19 16:55 drl_blogs 阅读(1590) 评论(0) 推荐(0) 编辑

摘要： [root@hadoop01 redis-3.0.0]# makecd src && make allmake[1]: Entering directory `/usr/loc... 阅读全文

posted @ 2019-06-19 16:55 drl_blogs 阅读(3234) 评论(0) 推荐(0) 编辑

摘要：文章目录文本文件输入输出读取文本文件保存文本文件JSON/CSV文件输入输出SequenceFile文件输入输出保存SequenceFile文件查看SequenceFile文件... 阅读全文

posted @ 2019-06-19 16:54 drl_blogs 阅读(353) 评论(0) 推荐(0) 编辑

摘要： Action目录reduce(f: (T, T) => T): Tcollect(): Array[T]count(): Longfirst(): Ttake(num: Int... 阅读全文

posted @ 2019-06-19 16:54 drl_blogs 阅读(146) 评论(0) 推荐(0) 编辑

摘要： Transformation操作目录map[U: ClassTag](f: T => U): RDD[U]filter(f: T => Boolean): RDD[T]flat... 阅读全文

posted @ 2019-06-19 16:54 drl_blogs 阅读(518) 评论(0) 推荐(0) 编辑

drl_blogs