2017年2月23日
启动hive命令时指定参数或自定义参数
摘要： 启动hive命令时指定参数或自定义参数 在hive启动命令中指定一个参数 在hive启动命令中指定多个参数,这些参数是hive site.xml中参数，也开始自定义的惨。 在resouceManager 的UI页面中查看job.xml文件中可以找到如下自定义的参数： 阅读全文
posted @ 2017-02-23 18:03 丹江湖畔养蜂子赵大爹 阅读(1154) 评论(0) 推荐(0) 编辑
spark任务提交到yarn上命令总结
摘要： spark任务提交到yarn上命令总结 1. 使用spark submit提交任务 集群模式执行 SparkPi 任务，指定资源使用,指定eventLog目录 不指定资源，使用yarn的默认资源分配。 动态的加载spark配置 客户端模式执行 SparkPi 任务:spark submit 2. 使 阅读全文
posted @ 2017-02-23 17:51 丹江湖畔养蜂子赵大爹 阅读(18828) 评论(0) 推荐(2) 编辑