摘要: 目标 掌握sparksql操作jdbc数据源 掌握sparksql保存数据操作 掌握sparksql整合hive 要点 1. jdbc数据源 spark sql可以通过 JDBC 从关系型数据库中读取数据的方式创建DataFrame,通过对DataFrame一系列的计算后,还可以将数据再写回关系型数 阅读全文
posted @ 2019-11-13 20:52 小码农成长记 阅读(280) 评论(0) 推荐(0) 编辑
摘要: 目标 掌握sparksql底层原理 掌握sparksql中DataFrame和DataSet的数据结构和使用方式 掌握通过sparksql开发应用程序 要点 1.sparksql概述 1.1 sparksql的前世今生 Shark是专门针对于spark的构建大规模数据仓库系统的一个框架 Shark与 阅读全文
posted @ 2019-11-13 20:30 小码农成长记 阅读(233) 评论(0) 推荐(0) 编辑