2019年3月22日
Linux记录-salt-minion安装
摘要： python -m SimpleHTTPServer 8888#!/bin/bash sed -i 's/^#//g' /etc/yum.repos.d/centos7.4.repo sed -i 's/enabled=0/enabled=1/g' /etc/yum.repos.d/centos7. 阅读全文
posted @ 2019-03-22 17:16 信方 阅读(1250) 评论(0) 推荐(0) 编辑
Linux记录-文件格式
摘要： yum -y install dos2unix dos2unix filename 阅读全文
posted @ 2019-03-22 11:56 信方 阅读(162) 评论(0) 推荐(0) 编辑
Hadoop记录-NameNode优化
摘要： 1.NameNode启动过程 采用多线程写入fsimage，能够有效的提升fsimage加载速度，从而缩短NameNode启动速度。如果NameSpace存在大量文件，使得fsimage文件巨大，则这种时间缩短会更加明显。 重启过程尽可能避免出现CheckPoint。触发CheckPoint有两种情 阅读全文
posted @ 2019-03-22 09:26 信方 阅读(885) 评论(0) 推荐(0) 编辑
Hadoop记录-Hive调优：让任务并行执行
摘要： set mapred.job.queue.name=pms; //设置队列set hive.exec.reducers.max=8; //设置最大的reducersset mapred.reduce.tasks=8; //设置最大的redue tasksset hive.exec.parallel= 阅读全文
posted @ 2019-03-22 09:13 信方 阅读(2040) 评论(0) 推荐(1) 编辑