摘要: 把tez-site.xml文件放到hadoop的配置文件目录下,解决~ 阅读全文
posted @ 2020-05-16 16:24 济默 阅读(1489) 评论(1) 推荐(0) 编辑
摘要: MapReduce的默认输出数据的间隔符是制表符,现在想改成逗号间隔,可通过Configuration对象修改 configuration.set("mapred.textoutputformat.ignoreseparator","true"); configuration.set("mapred 阅读全文
posted @ 2020-05-07 12:19 济默 阅读(317) 评论(0) 推荐(0) 编辑
摘要: 集群需要同步时间,我直接把各个节点同步网络时间,参考的这个帖子 https://blog.csdn.net/a_drjiaoda/article/details/89674468 阅读全文
posted @ 2020-05-06 21:33 济默 阅读(185) 评论(0) 推荐(0) 编辑
摘要: 本文记录一下Geomesa-Hbase集群部署,在单机部署的基础上 https://www.cnblogs.com/help-silence/p/12817447.html 1.搭建集群 https://www.cnblogs.com/help-silence/p/12517442.html 2.安 阅读全文
posted @ 2020-05-03 09:14 济默 阅读(1002) 评论(0) 推荐(1) 编辑
摘要: 本文记录一下Geomesa-Hbase单机部署,步骤如下: 1.在VMware下创建虚拟机 2.安装Linux系统(我选的是centos6.8) https://www.cnblogs.com/help-silence/p/12515686.html 3.网络配置 https://www.cnblo 阅读全文
posted @ 2020-05-02 22:16 济默 阅读(1854) 评论(0) 推荐(0) 编辑
摘要: 安装ZooKeeper时,无论是修改zoo.cfg;还是myid,都检查了几遍都没有错误。但是开启Zookeeper服务时出现: Error contacting service. It is probably not running. 后来查看日志发现,是我的hosts文件,之前手误出错了,变成了 阅读全文
posted @ 2020-05-01 20:48 济默 阅读(270) 评论(0) 推荐(0) 编辑
摘要: 本文记录一下Maven工具的安装,我的系统是Centos6.8,安装Maven3.6。 注:目录根据自己的修改 1.下载Maven安装包 下载地址:http://maven.apache.org/download.cgi 2.解压 [root@dell01 software]# tar -zxvf 阅读全文
posted @ 2020-04-26 10:03 济默 阅读(170) 评论(0) 推荐(0) 编辑
摘要: 1,把安装包导进来并解压 2,conf目录下的 sqoop-env-template.sh 改成 sqoop-env.sh [root@master conf]# mv sqoop-env-template.sh sqoop-env.sh 3,在sqoop-env.sh文件中添加配置信息 expor 阅读全文
posted @ 2020-01-11 09:12 济默 阅读(741) 评论(0) 推荐(0) 编辑
摘要: 集群中有两个节点,总是不知不觉datanode自己就down了,所以我重新格式化了一下NameNode问题解决。原因可能是我之前单机模式时格式化了一次NameNode,后来搭建集群之后就没有再次格式化。 1,如果不是第一次格式化NameNode,先把集群的各个进程都关掉。 2,删除各个节点Hadoo 阅读全文
posted @ 2020-01-10 13:05 济默 阅读(2390) 评论(0) 推荐(0) 编辑
摘要: 同样把Hbase安装包上传到/opt/software目录中,并解压到/opt/module中。我安装版本是1.3.1 1,配置hbase-env.sh文件 export JAVA_HOME=/opt/module/jdk1.8.0_211 export HBASE_MANAGES_ZK=false 阅读全文
posted @ 2020-01-09 15:14 济默 阅读(360) 评论(0) 推荐(0) 编辑