05 2015 档案
摘要：代码确信无误之后，ant运行起来，发现一执行就卡在Running Job XXXX那里一直不动了。 试着把代码打包成jar扔到Linux执行也还是一样的效果。还是停在那里。然后就一顿瞎蒙。最后发现是Hadoop2的datanode的问题。当时试着执行list的时候发现是znode=null啥的...
阅读全文
摘要：Quorum请求是转发给Leader处理，并且需要得一个Follower Quorum确认的请求。这些请求包括：1）znode的写操作(OpCode.create，OpCode.delete，OpCode.setData，OpCode.setACL)2）Session的创建和关闭操作（OpCode....
阅读全文
摘要：ZooKeeper是Hadoop Ecosystem中非常重要的组件，它的主要功能是为分布式系统提供一致性协调(Coordination)服务，与之对应的Google的类似服务叫Chubby。今天这篇文章分为三个部分来介绍ZooKeeper，第一部分介绍ZooKeeper的基本原理，第二部分介绍Zo...
阅读全文
摘要：转自http://blog.csdn.net/zhangt85/article/details/42078347查看日志如下:2014-12-22 12:08:27,264 INFO org.mortbay.log: Started HttpServer2$SelectChannelConnecto...
阅读全文
摘要：之前项目有个entity是写在Entity层的，相关的配置项也写死在程序里了，而且还是个static的配置，后来有了新需求，上峰指示要从CMS读取配置内容，大概是要在BLL实现，BLL依赖IBLL的ICMSProvider，实现好entity后又要供其它的BLLService使用，当时一直想不出...
阅读全文
摘要：当时执行hive的导入数据load data inpath "XXXX" into table.....的时候发现总是导不进去，最后试了下简单的从Linux 到 HDFS上传文件发现都不成功，提示datanode的问题。后来省事就直接将以前成功安装的hadoop-2.6.0的文件夹整个替代掉再bin...
阅读全文
摘要：hdfs dfs -chmod -R 755 /之前执行过这条语句，但是总是提示：15/05/21 08:10:18 WARN util.NativeCodeLoader: Unable to load native-hadoop library for your platform... using...
阅读全文
摘要：新买了个笔记本，在学习大数据的时候装上VMWare，运行虚拟机发现提示无法执行64位操作。本人系统是win7,64位系统。之后就是一顿度娘，发现千篇一律都是检测CPU支不支持虚拟化，支持的话去BIOS里设置虚拟化技术设置为enabled。本以为就像是网上说的那样保存重启就OK了，但是保存了设置和...
阅读全文
摘要：这几天都在学习Hive，在安装方面花费了不少时间，主要问题集中在：1）创建数据库后创建表不成功，提示Specified key was too long; max key length is 767 bytes 长度的问题。因为用的不是案例的数据库，傻不拉几折腾了好些时间。2）总算创建表成功了...
阅读全文
摘要：转自：http://blog.csdn.net/hugengyong/article/details/38237819 以及 http://www.2cto.com/database/201309/240558.html 如果要在Linux上做j2ee开发，首先得搭建好j2ee的开发环境，包括了jd
阅读全文
摘要：转自：http://blog.csdn.net/gexiaobaohelloworld/article/details/7719163入口：bin/hive脚本中，环境检查后执行ext中的cli.sh，进入主类：CliDriver.main。CliDriver.main:进入cli.processL...
阅读全文
