关于ssh免密互访
摘要：
想要通过ssh进行免密处理，细节就不赘述了，白度一搜一大把； 但是我遇到了一个情况，就是生成的公钥后无法复制到user/.ssh目录下，因为没有ssh目录（.ssh是隐藏目录，正常情况下ls都无法查看，但是cd可以到目录下） 采用root用户登录一次./ssh就有了 另外注意ssh免密是针对用户，就 阅读全文
posted @ 2017-09-03 21:40 下士闻道 阅读(169) 评论(0) 推荐(0) 编辑
NFS安装
摘要：
安装应用 yum install -y nfs-utils rpcbind 服务器端： 1.启动服务 service nfs start service rpcbind start 2. 编辑文件：/etc/exports，增加共享的文件路径以及共享方式 /home/filesrv 10.1.8.* 阅读全文
posted @ 2017-09-03 20:26 下士闻道 阅读(190) 评论(0) 推荐(0) 编辑
Mesos以及Marathon安装总结
摘要：
安装了将近一周的环境了，终于把Mesos以及Marathon给安装上了，我指的离线安装。 策略1： 严格的按照官网的流程： http://mesos.apache.org/gettingstarted/ 找一台能够上网的机器，通过yum install/update --downloadonly - 阅读全文
posted @ 2017-09-03 20:19 下士闻道 阅读(660) 评论(0) 推荐(0) 编辑
Mesos的quorum配置引发的问题
摘要：
Mesos安装完毕后，发现agent无法和master关联（通过WebUI的agent页面无法看到agent信息），查看日志显示： Elected as the leading master! starat recovery...具体记不清了，就是打算向zookeeper中写入信息，但是失败了 Re 阅读全文
posted @ 2017-09-03 18:26 下士闻道 阅读(503) 评论(0) 推荐(0) 编辑
chronoy & NTP
摘要：
同步时间 配置文件中/etc/chrony.conf 里面指定: server master iburst keyfile /etc/chrony.keys commandkey 1 allow all 在/etc/chrony.keys文件中添加： 1 password 将chrony.conf以 阅读全文
posted @ 2017-08-31 22:08 下士闻道 阅读(1134) 评论(0) 推荐(0) 编辑
/boot下面文件说明
摘要：
config-3.10.0-229.el7.x86_64 <==此版本核心被编译时选择的功能与模组设定档 grub/ <==旧版 grub1 ，不需要理会这目录了！ grub2/ <==就是开机管理程式 grub2 相关资料目录 initramfs-0-rescue-309eb890d3d95ec7 阅读全文
posted @ 2017-08-31 22:04 下士闻道 阅读(327) 评论(0) 推荐(0) 编辑
Linux命令汇总（二）
摘要：
1.登录用户设置 新创建了一个用户，用useradd指令，但是发现通过终端无法登陆； echo password | passwd --stdin username 或者 passwd --stdin username <<< password 2.yum的本地安装 rpm -i 只能是安装，无法进 阅读全文
posted @ 2017-08-31 21:56 下士闻道 阅读(927) 评论(0) 推荐(0) 编辑
关于pyspark
摘要：
http://spark.apache.org/ 官网，下载tar包 解压缩到本地； 设置环境变量，把%Spark解压缩路径%/bin放入到PATH变量中；（可以考虑设置一个SPARK_HOME) 在命令窗口中敲入pySpark，将会看到一系列OK的提示字符串； 问题： Could not loca 阅读全文
posted @ 2017-08-27 22:12 下士闻道 阅读(166) 评论(0) 推荐(0) 编辑
关于CDH
摘要：
进入到任何一个Host的页面，点击“components"，就可以看到这个主机安装的组件的版本 阅读全文
posted @ 2017-08-27 22:09 下士闻道 阅读(133) 评论(0) 推荐(0) 编辑
hive通过spark导入hbase
摘要：
发现采用shcjar的话，总是执行到某个点就停止了 于是我打算尝试一下直接说哦用org.apache.hadoop.hbase.spark这个datasource看看 确实不行，即使没有createtable，也是报错没有权限创建表；还是专心来研究一下shc吧 翻看一下日志，日志注明了spark查看 阅读全文
posted @ 2017-08-27 22:06 下士闻道 阅读(1580) 评论(0) 推荐(0) 编辑
