SEQ!org.apache.hadoop.io.LongWritable"org.apache.hadoop.io.BytesWritable

摘要: flume-ng使用hdfs sink时出现此异常,未设置属性tier1.sinks.sink1.hdfs.fileType=DataStream 阅读全文
posted @ 2015-12-04 01:06 不得不写 阅读(1428) 评论(0) 推荐(0) 编辑

hive加载数据后查询为空

摘要: hive加载的数据为通过flume-ng收集的数据,然后直接将其sink指定为hdfs,在指定hdfs sink的前缀时获取header中的host内容,而前一个源根本没有将host传递过来,所以导致存入hdfs中的数据文件文件名为以点开头,如下:接下来在hive中创建一个外部表(内部表也一样),导... 阅读全文
posted @ 2015-12-03 22:58 不得不写 阅读(2240) 评论(0) 推荐(0) 编辑

vsftpd报530 permission deniedt与530 login incorrect错误

摘要: 进入到/etc/vsftpd目录下,vi ftpusers将其中你要使用登陆的用户删除,vi user_list同样将要使用的用户删除,然后重启vsftpd服务即可 阅读全文
posted @ 2015-11-08 23:36 不得不写 阅读(408) 评论(0) 推荐(0) 编辑

要将eclipse项目到如myeclipse中注意事项

摘要: 要将Default output folder中的“build\classes”改为图中的“WebRoot\WEB-INF\classes” 阅读全文
posted @ 2015-10-25 18:49 不得不写 阅读(177) 评论(0) 推荐(0) 编辑

cdh5 离线安装问题

摘要: 1.parcel 哈希验证错误:从cloudera下载的CDH-5.1.0-1.cdh5.1.0.p0.53-el6.parcel.sha1中用vi打开,将其后面的路径删除,如原内容为67fc4c86b260eeba15c339f1ec6be3b59b4ebe30 ./cdh5/parcels/5.... 阅读全文
posted @ 2015-08-20 22:42 不得不写 阅读(339) 评论(0) 推荐(0) 编辑

VitrualBox复制centos系统网卡设置

摘要: 1.确保被复制的系统在关闭状态而不是休眠状态再复制,否则复制出来的新系统下/etc/udev/rules.d/70-persistent-net.rules 文件中只有一个eth0,而关闭状态下复制出的则有eth0与eth1两个网卡2.复制完成后vi进入到/etc/udev/rules.d/70-p... 阅读全文
posted @ 2015-08-11 21:48 不得不写 阅读(138) 评论(0) 推荐(0) 编辑

maven使用之maven项目之间引用及内置变量

摘要: 自己的几个项目之间往往需要互相引用,如果同为maven项目,那应该如何引用呢?如A项目需要引用B项目生成的jar包,则只需对B项目执行maven install操作执行该操作后就会在你的本地repo中对应目录下生成该jar包此时A即可在自己的pom.xml文件中添加该依赖项如: xx.xx.xx... 阅读全文
posted @ 2015-07-14 20:18 不得不写 阅读(4462) 评论(0) 推荐(0) 编辑

maven package:Failed to execute goal org.apache.maven.plugins:maven-surefire-plugin:2.5:test

摘要: 项目pom.xml文件中添加: org.apache.maven.plugins maven-surefire-plugin 2.4.2 true ... 阅读全文
posted @ 2015-07-14 01:07 不得不写 阅读(163) 评论(0) 推荐(0) 编辑

maven安装及在MyEclipse中 设置

摘要: 官网:http://maven.apache.org/安装:下载后将其解压,进入到conf文件夹下修改settings.xml文件中D:/mvn_repo项,将其设置为你的maven的工作目录,项目中依赖的包就会下载到此路径下。与MyEclipse集成配置:将配置文件指向到刚才修改的maven下的c... 阅读全文
posted @ 2015-06-27 14:02 不得不写 阅读(163) 评论(0) 推荐(0) 编辑

linux jdk安装卸载

摘要: 卸载jdk[root@n6 ~]# rpm -qa|grep jdk //查询已安装的jdkjava-1.7.0-openjdk-1.7.0.79-2.5.5.3.el6_6.x86_64[root@n6 ~]# #rpm -e --nodeps ava-1.7.0-openjdk-1.7.0... 阅读全文
posted @ 2015-06-27 00:58 不得不写 阅读(284) 评论(0) 推荐(0) 编辑