10 2018 档案
摘要:https://blog.csdn.net/liu0808/article/details/80668705 先给出crontab的语法格式 对于网上很多给出的每小时定时任务写法,可以说绝大多数都是错误的!比如对于下面的这种写法: 这种是正确的吗?对照最前面给出的语法格式来看,这个定时任务在0分、每
阅读全文
摘要:近期又有需求为:导入Oracle的表到hive库中; 关于spark读取Oracle到hive有以下两点需要说明: 1、数据量较小时,可以直接使用spark.read.jdbc(orclUrl,table_name,orclProperties)读取,效率应该没什么问题,能很快完成; 2、数据量较大
阅读全文
摘要:参考:http://blog.51cto.com/12824426/2177663?source=drh 一、集群的规划 Zookeeper集群:192.168.176.131 (bigdata112)192.168.176.132 (bigdata113)192.168.176.135 (bigd
阅读全文
摘要:文章为转载,如有版权问题,请联系,谢谢! 转自:https://blog.csdn.net/piduzi/article/details/81636253 适合场景:在运行时才确定用哪个数据源 import org.apache.hadoop.conf.Configurationimport org
阅读全文