随笔分类 - 【Linux】Ubuntu16.04环境搭建
摘要:上次发了部署八节点hadoop集群的博客,本来想把master也做为一个datanode,后来感觉不太合适,最后决定还是扩展一个子节点吧。首先是准备新的节点安装jdkhttp://blog.csdn.net/fontthrone/article/details/779...
阅读全文
摘要:先感叹一下准备因为之前已经有安装经验了(虚拟机的三节点分布式,按过几次),再加上对Ubuntu还算比较熟悉中间也算少踩了不少坑。因为这次主要是老师要求所以,才打算再自己安装一次apche hadoop版本,其实现在我个人还是更支持CDH搭建大数据开发平台的,但是最近时...
阅读全文
摘要:SSH配置主节点登录其他节点时的最后一个命令,按照上一篇写的有时候会无法生效。其实那一行命令只是将主节点的公钥复制到了次节点的公钥文件里而已,如果无法生效的话,直接复制粘贴也可以。我在无法生效时就直接复制粘贴的。比如我主节点的公钥如下ssh-rsa AAAAB3Nza...
阅读全文
摘要:确认需要集群的主机名与IP地址,修改主机名字的命令sudo gedit /etc/hostname如果修改了主机名,请重启,没有则下一步在每个主机上都下载ssh sudo apt-get install openssh-server 关闭防火墙,sudo ufw di...
阅读全文
摘要:# 安装Oracle JDK hadoop建议使用Oracle JDK 第一步: 将webupd8team存储库添加到apt我们将使用命令add-apt-repository通过以下命令添加webupd8team存储库:sudo apt install pytho...
阅读全文
摘要:安装PycharmPycharm下载与准备官网下载无需多言:https://www.jetbrains.com/pycharm/download/#section=linux安装JDKUbuntu16.04建议安装openjdksudo apt install def...
阅读全文