大数据学习——yarn集群启动
摘要：启动yarn命令: start-yarn.sh 验证是否启动成功 1 jps查看进程 2 http://192.168.74.100:8088页面 关闭 stop-yarn.sh
阅读全文
posted @
2018-12-25 18:32
o_0的园子
阅读(496)
推荐(0) 编辑
大数据学习——hdfs集群启动
摘要：第一种方式： 1 格式化namecode（是对namecode进行格式化） hdfs namenode -format(或者是hadoop namenode -format) 进入 cd /root/apps/hadoop/tmp/dfs/name/current 启动namecode hadoop
阅读全文
posted @
2018-12-24 13:53
o_0的园子
阅读(714)
推荐(0) 编辑
大数据学习——hadoop安装
摘要：上传centOS6.7-hadoop-2.6.4.tar.gz 解压 tar -zxvf centOS6.7-hadoop-2.6.4.tar.gz hadoop相关修改配置 1 修改 /root/apps/hadoop/etc/hadoop 目录下的hadoop-env.sh vi hadoop-
阅读全文
posted @
2018-12-23 19:10
o_0的园子
阅读(183)
推荐(0) 编辑
大数据学习——软件安装
摘要：1 jdk yum install lrzsz 比alt+p上传文件更方便 rz 回车就可以上传文件了，上传是上传到当前目录下 解压上传的jdk tar -zxvf jdk-7u80-linux-x64.tar.gz 配置变量 vi /etc/profile #在文件最后添加 export JAVA_HOME=/root/apps/jdk1.7.0_80 export PATH=$...
阅读全文
posted @
2018-12-23 18:49
o_0的园子
阅读(333)
推荐(0) 编辑
大数据学习——免密登录配置
摘要：1 在mini1上 ssh-keygen -t rsa 回车——回车——回车 ssh-copy-id root@mini2 yes 密码 hadoop 测试 ssh mini2可以从mini1切换到mini2 退出是exit,从mini2切换回mini1 注意也要给自给机器配置一个 ssh-copy-id root@mini1
阅读全文
posted @
2018-12-23 18:12
o_0的园子
阅读(419)
推荐(0) 编辑
大数据学习——修改主机名和ip的映射关系
摘要：vi /etc/hosts 192.168.1.101 itcast
阅读全文
posted @
2018-12-23 17:53
o_0的园子
阅读(496)
推荐(0) 编辑
大数据学习——hadoop集群搭建2.X
摘要：1.准备Linux环境 1.0先将虚拟机的网络模式选为NAT 1.1修改主机名 vi /etc/sysconfig/network NETWORKING=yes HOSTNAME=itcast ### 1.2修改IP 两种方式： 第一种：通过Linux图形界面进行修改（强烈推荐） 进入Linux图形界面 -> 右键点击右上方的两个小电脑 -> 点击Edit connections -> 选...
阅读全文
posted @
2018-12-23 17:41
o_0的园子
阅读(218)
推荐(0) 编辑
大数据学习——ip改成固定ip
摘要：vi /etc/sysconfig/network-scripts/ifcfg-eth0 修改BOOTPROTO为static 添加IPADDR=192.168.74.100 添加NETMASK=255.255.255.0 添加GATEWAY=192.168.74.2 添加DNS1=192.168.
阅读全文
posted @
2018-12-23 17:06
o_0的园子
阅读(385)
推荐(0) 编辑
大数据学习——服务器定期上传nginx日志到hdfs
摘要：需求：按照所学知识完成如下： 服务器定期上传nginx日志到hdfs 提示： Hdfs的创建文件夹命令： Hadoop fs -mkdir /文件夹名称 Hdfs的上传命令： Hadoop fs -put 目标文件 /目标目录 #日志文件存放的目录 log_src_dir=/home/hadoop/logs/log/ #待上传的日志存放目录 log_toupload_dir=/ho...
阅读全文
posted @
2018-12-21 14:28
o_0的园子
阅读(771)
推荐(0) 编辑
大数据学习——装私服nexus
摘要：（一）安装 解压之后 进入bin文件夹下 复制路径 D:\software\nexus-2.12.0-01-bundle\nexus-2.12.0-01\bin 进入命令行窗口输入以下命令，安装成功 （如果报错 'findstr' 不是内部或外部命令，也不是可运行的程序或批处理文件 这是PATH环境
阅读全文
posted @
2018-12-19 19:07
o_0的园子
阅读(305)
推荐(0) 编辑
大数据学习——redis安装
摘要：用源码工程来编译安装 1/ 到官网下载最新stable版 2/ 解压源码并进入目录 tar -zxvf redis-2.8.19.tar.gz -C ./redis-src/ 3/ make 如果报错提示缺少gcc，则安装gcc ： yum install -y gcc 如果报错提示：Newer version of jemalloc required 则在make时加参数...
阅读全文
posted @
2018-12-13 19:55
o_0的园子
阅读(244)
推荐(0) 编辑
大数据学习——安装zooleeper
摘要：1 alt+p，上传zookeeper-3.4.5.tar.gz 2 解压安装包 ,安装在apps目录下 tar -zxvf zookeeper-3.4.5.tar.gz -C apps 3 删除zookeeper-3.4.5安装后用不到的文件，只留下bin conf lib zookeeper-3
阅读全文
posted @
2018-12-10 15:55
o_0的园子
阅读(352)
推荐(0) 编辑
大数据学习——Linux-SSH报错：Could not resolve hostname centos02: Temporary failure in name resolution
摘要：https://blog.csdn.net/mcb520wf/article/details/83303792 随笔异常 ssh: Could not resolve hostname centos02: Temporary failure in name resolution 发现两台服务器如果进
阅读全文
posted @
2018-12-10 14:14
o_0的园子
阅读(13654)
推荐(0) 编辑
大数据学习——虚拟机准备(改主机名)
摘要：1 vi /etc/sysconfig/network 把HOSTNAME改为mini2 hostname mini2 exit 2 vi /etc/udev/rules.d/70-persistent-net.rules 删除eth0，把eth1改为eth0 3 vi /etc/sysconfig/network-scripts/ifcfg-eth0 删除uuid ...
阅读全文
posted @
2018-12-09 21:44
o_0的园子
阅读(492)
推荐(0) 编辑
大数据学习——shell编程
摘要：03/ shell编程综合练习 自动化软件部署脚本 3.1 需求 1、需求描述 公司内有一个N个节点的集群，需要统一安装一些软件（jdk） 需要开发一个脚本，实现对集群中的N台节点批量自动下载、安装jdk 2、思路 1/ 编写一个启动脚本，用来发送一个软件安装脚本到每一台机器 2/ 然后启动每台机器
阅读全文
posted @
2018-12-08 18:14
o_0的园子
阅读(264)
推荐(0) 编辑
大数据学习——yum练习安装mysql
摘要：1. 安装mysql 服务器端： 2. 安装mysql客户端： 3. 启动mysql服务： 停止： 重启： 4. 创建root管理员： 5.登陆 6.root权限 设置mysql的开机启动
阅读全文
posted @
2018-12-08 17:59
o_0的园子
阅读(191)
推荐(0) 编辑
大数据学习——yum安装tomcat
摘要：https://www.cnblogs.com/jtlgb/p/5726161.html 安装tomcat6 启动tomcat6 停止tomcat6 重启tomcat6 按照以上方法安装tomcat6默认目录在/usr/share/tomcat6/下 配置文件默认目录在/etc/tomcat6/下
阅读全文
posted @
2018-12-08 17:55
o_0的园子
阅读(188)
推荐(0) 编辑
