摘要: 阅读全文
posted @ 2019-04-10 17:42 江东邮差 阅读(98) 评论(0) 推荐(0) 编辑
摘要: 步骤和集群规划 1)保存完全分布式模式配置 2)在full配置的基础上修改为高可用HA 3)第一次启动HA 4)常规启动HA 5)运行wordcount 集群规划: centos虚拟机:node-001、node-002、node-003、node-004 node-001:Active NN、Jo 阅读全文
posted @ 2019-03-26 23:33 江东邮差 阅读(1044) 评论(0) 推荐(0) 编辑
摘要: 环境:Hadoop-2.8.5 、centos7、jdk1.8 一、步骤 1).4台centos虚拟机 2). 将hadoop配置修改为完全分布式 3). 启动完全分布式集群 4). 在完全分布式集群上测试wordcount程序 二、4台centos虚拟机配置 4台虚拟机:node-001、node 阅读全文
posted @ 2019-03-20 20:55 江东邮差 阅读(380) 评论(0) 推荐(0) 编辑
摘要: 需要解决实际问题:乱序 阅读全文
posted @ 2019-03-09 17:56 江东邮差 阅读(652) 评论(0) 推荐(0) 编辑
摘要: 一、为什么设置ssh免密码登录 在集群中,Hadoop控制脚本依赖SSH来执行针对整个集群的操作。例如,某个脚本能够终止并重启集群中的所有守护进程。所以,需要安装SSH,但是,SSH远程登陆的时候,需要密码验证,集群中数千台计算机,数千台计算机都需要手工输入密码,这是不太现实的,所以,就需要配置SS 阅读全文
posted @ 2019-02-27 16:22 江东邮差 阅读(3542) 评论(0) 推荐(0) 编辑
摘要: 安装:yum install firewalld 1、firewalld的基本使用 启动: systemctl start firewalld 查看状态: systemctl status firewalld 禁用,禁止开机启动: systemctl disable firewalld 停止运行: 阅读全文
posted @ 2019-02-27 14:27 江东邮差 阅读(206) 评论(0) 推荐(0) 编辑
摘要: 一般情况下,开发大数据处理程序,我们希望能够在本地编写代码并调试通过,能够在本地进行数据测试,然后在生产环境去跑“大”数据。 一、nc工具 配置windows的nc端口,在网上下载nc.exe(https://eternallybored.org/misc/netcat/) 使用命令开始nc制定端口 阅读全文
posted @ 2019-02-26 00:22 江东邮差 阅读(5250) 评论(0) 推荐(0) 编辑
摘要: 题目 n阶矩阵,螺旋打印出来 思路 需要控制:1.边界 2.方向 使用一个二维数组存放数据,数组初始化为0,数组共有n平方个元素,因为是从1开始,所以元素的值是从1到n×n。每次填入一个数字判断一次方向和边界 实现 运行结果 阅读全文
posted @ 2019-02-25 16:37 江东邮差 阅读(188) 评论(0) 推荐(0) 编辑
摘要: 题目 输入某二叉树的前序遍历和中序遍历的结果,请重建出该二叉树。假设输入的前序遍历和中序遍历的结果中都不含重复的数字,例如输入前序遍历序列{1,2,4,7,3,5,6,8}和中序遍历序列{4,7,2,1,5,3,8,6},则重建出二叉树并输出它的头结点。 利用递归的方法构建,其实没有想象的那么难,主 阅读全文
posted @ 2019-02-21 17:44 江东邮差 阅读(135) 评论(0) 推荐(0) 编辑
摘要: 题目 用先序,中序,后序,分别遍历一个二叉树 思想 1.(递归法)利用递归思想,向左向右遍历一个二叉树 2.(非递归)利用栈和循环,将结点压栈,按不同遍历方式选择不同策略从栈中取出结点输出 PS:后序遍历思想,从根结点开始,将所有最左结点全部压栈,每当一个结点出栈时,都先扫描该结点的右子树,只有当一 阅读全文
posted @ 2019-02-19 16:14 江东邮差 阅读(169) 评论(0) 推荐(0) 编辑