07 2016 档案

hdfs 创建一个新用户
摘要：需要给第三方提供hdfs用户，和上传文件的权限 1、需要先在linux 上创建一个普通用户： hn,并修改密码 sudo -u hdfs hadoop fs -mkdir /user/用户名 sudo -u hdfs hadoop fs -mkdir /user/hn sudo -u hdfs ha 阅读全文
posted @ 2016-07-27 10:55 zhanggl 阅读(4164) 评论(0) 推荐(0) 编辑
ssh 免密码登录实现批量处理
摘要：搭建集群的时候ssh 免密码登录是一个问题以下脚本将实现批量处理 文件1主机名：host 17.19.18.11:12317.19.18.12:123 文件2：ssh_setup.py 文件3：ssh_distribute.py 文件4：noscp.exp 文件5：sshkey.exp 步骤： 1. 阅读全文
posted @ 2016-07-25 16:29 zhanggl 阅读(713) 评论(0) 推荐(0) 编辑
在JAVA中使用JSONObject生成json
摘要：JSON是一种轻量级的数据交换格式，在现在的web开发中，是非常常见的。在没有方便的工具之前，我们或许会使用拼字符串的形式来生成json数组，今天我们使用一个json-lib.jar包来为我们实现生成json的功能。 所必须的包有： commons-httpclient-3.1.jar common 阅读全文
posted @ 2016-07-13 16:45 zhanggl 阅读(2797) 评论(0) 推荐(0) 编辑
读取hive文件并将数据导入hbase
摘要：JDBCUtils类： 阅读全文
posted @ 2016-07-10 20:45 zhanggl 阅读(5436) 评论(0) 推荐(0) 编辑