2019年8月19日
spark并行查询
摘要： 一、jdbc连接数据库 我们知道spark可以通过jdbc查询数据库，但是Spark 通过 JDBC 读取关系型数据库，默认查询全表，只有一个 Task 去执行查询操作，大量数据情况下，效率是很慢的。 这时，可以通过构造多个 Task 并行连接 数据库提升效率。 二、spark sql属性介绍 1、 阅读全文
posted @ 2019-08-19 10:12 力扛九鼎 阅读(858) 评论(0) 推荐(0) 编辑