加拿大小哥哥

2016年11月29日

摘要：我特意选择了稳定版...... 奇数意思是说奇数和偶数对故障的容忍度是一致的....所以建议配置奇数个，并不是必须奇数... 一、master节点上安装配置 1、下载并解压ZooKeeper-3.4.6.tar.gz 这里路径为 /home/fesh/zookeeper-3.4.6 2、设置the 阅读全文

posted @ 2016-11-29 14:56 加拿大小哥哥阅读(5269) 评论(0) 推荐(0) 编辑

交叉链表公共结点

摘要：考虑链表的单向性，因此两个相交的链表应该呈现出Y开状，而不是X形状，即第一个交点后的长度相同，这样通过遍历两个链表可以判断开头部分的长度之差。设链表A – B = M，则先让A链表先遍历M的结点，然后A，B两链表同时遍历，比较两个结点，第一个相同的结点则为第一个交点。阅读全文

posted @ 2016-11-29 12:08 加拿大小哥哥阅读(284) 评论(0) 推荐(0) 编辑

2016年11月24日

Hadoop2.x Permission denied: user=dr.who, access=READ_EXECUTE inode="/tmp"

摘要：在hadoop2中查看网页中的/tmp目录出现下面的错误：修改权限就好了。。。。我原来一直纠结dr.who是什么鬼...不管他修改hdfs的权限就好了。阅读全文

posted @ 2016-11-24 16:35 加拿大小哥哥阅读(7348) 评论(2) 推荐(0) 编辑

Unable to load native-hadoop library for your platform... using builtin-Java classes where applicable

摘要：以前hadoop也有这个问题，没注意，用spark也提示，解决一下。首先找到对应自己hadoop版本的的lib包，编译好后，名字类似hadoop-native-64-2.4.1.tar ，放到lib下的覆盖native。设置环境变量并生效。还是不行。。阅读全文

posted @ 2016-11-24 14:58 加拿大小哥哥阅读(437) 评论(0) 推荐(0) 编辑

2016年11月22日

Jquery打叉怎么办

摘要：选中报错文件右键MyEclipse>Exclude From xxxx 阅读全文

posted @ 2016-11-22 17:49 加拿大小哥哥阅读(179) 评论(0) 推荐(0) 编辑

Hadoop中JAVA不经过Catch(Exception e)直接到finally或者退出原因

摘要：原来是被变成Throwable抛出来了！而Exception是Throwable的子类，所以无法捕捉到，只有捕捉Throwable的时候，才可以将错误信息打印！阅读全文

posted @ 2016-11-22 17:25 加拿大小哥哥阅读(279) 评论(0) 推荐(0) 编辑

Namenode主节点停止报错 Error: flush failed for required journal

摘要：主节点间歇性报错其他没有问题，SNN的NN没有问题，相关的journalNode也都在，就是主节点的NN会停止。查看hadoop主节点的NN日志。首先保证设置dfs.namenode.edits.dir和dfs.journalnode.edits.dir，然后设置在hdfs-site.xml中阅读全文

posted @ 2016-11-22 09:14 加拿大小哥哥阅读(2749) 评论(0) 推荐(0) 编辑

SCP注意事项

摘要：中间路径省略了，刚开始没加冒号提示同样的文件，还以为是scp需要特殊指令才能复制同样的文件，查了发现不是，下面还有个提醒是hxsyl@...不是目录，这就奇怪了，吧注解当成目录了，然后发新啊少了冒号。阅读全文

posted @ 2016-11-22 00:37 加拿大小哥哥阅读(469) 评论(0) 推荐(0) 编辑

2016年11月21日

MapReduce实现WordCount

摘要： package algorithm; import java.io.IOException; import java.util.StringTokenizer; import org.apache.hadoop.io.IntWritable; import org.apache.hadoop.io.LongWritable; import org.apache.hadoop.io.Text;... 阅读全文

posted @ 2016-11-21 21:29 加拿大小哥哥阅读(242) 评论(0) 推荐(0) 编辑

2016年11月20日

Linux 输出重定向>和>>的区别

摘要： >是定向输出到文件，如果文件不存在，就创建文件；如果文件存在，就将其清空；一般我们备份清理日志文件的时候，就是这种方法：先备份日志，再用`>`，将日志文件清空（文件大小变成0字节）； >>这个是将输出内容追加到目标文件中。如果文件不存在，就创建文件；如果文件存在，则将新的内容追加到那个文件的末尾，该阅读全文

posted @ 2016-11-20 16:37 加拿大小哥哥阅读(252) 评论(0) 推荐(0) 编辑

公告