摘要:
参考官网:http://spark.apache.org/docs/latest/sql-data-sources-hive-tables.html 写完之后在idea 打成jar包,将jar包写到liunx下的根目录下 然后配置环境 如果不配置环境会出现以下错误 运行过程出现的bug: 原因:我的 阅读全文
摘要:
json格式 代码: 读取json格式的文件 代码: 读取远程数据库中的表数据,并写入磁盘 pom.xml依赖和插件的配置(idea) 阅读全文
摘要:
参考文档:https://files.cnblogs.com/files/han-guang-xue/spark1.pdf 参考网址:https://www.cnblogs.com/wangrd/p/6232826.html 对于spark个人理解: spark与mapreduce最大不同之处:sp 阅读全文