随笔分类 -  大数据

Kafka：主要参数详解（转）
摘要：原文地址：http://kafka.apache.org/documentation.html ############################# System ############################# #唯一标识在集群中的ID，要求是正数。 broker.id=0 #服务 阅读全文
posted @ 2016-12-29 09:24 huiy_小溪 阅读(383) 评论(0) 推荐(0) 编辑
Amabri：如何删除或停止指定的服务
摘要：原文地址：https://cwiki.apache.org/confluence/display/AMBARI/Using+APIs+to+delete+a+service+or+all+host+components+on+a+host From 1.4.3 onwards you need to 阅读全文
posted @ 2016-12-26 18:08 huiy_小溪 阅读(424) 评论(0) 推荐(0) 编辑
sqoop:Failed to download file from http://hdp01:8080/resources//oracle-jdbc-driver.jar due to HTTP error: HTTP Error 404: Not Found
摘要：环境：ambari2.3,centos7,sqoop1.4.6 问题描述：通过ambari安装了sqoop,又添加了oracle驱动配置，如下： 保存配置后，重启sqoop报错：http://hdp01:8080/resources//oracle-jdbc-driver.jar due to HT 阅读全文
posted @ 2016-12-07 08:38 huiy_小溪 阅读(500) 评论(0) 推荐(0) 编辑
在DBeaver中phoenix查询报错：org.apache.phoenix.exception.PhoenixIOException: The system cannot find the path specified
摘要：环境：Phoenix:4.4,win7系统 问题：Phoenix在查询hbase时，报“系统找不到指定路径”。 解决： 请参见 https://distcp.quora.com/Connect-and-query-Apache-Phoenix-with-Squirrel-from-Windows 。 阅读全文
posted @ 2016-12-06 16:17 huiy_小溪 阅读(2250) 评论(0) 推荐(0) 编辑
flume：spooldir采集日志，kafka输出的配置问题
摘要：flume配置： #DBFile DBFile.sources = sources1 DBFile.sinks = sinks1 DBFile.channels = channels1 # DBFile-DB-Source DBFile.sources.sources1.type = spooldi 阅读全文
posted @ 2016-12-03 09:44 huiy_小溪 阅读(2631) 评论(0) 推荐(0) 编辑
Ambari server:无法显示内存，CPU等使用率
摘要：Ambari server安装完毕后，都能正确显示各种信息。运行了几天后，发现无法显示内存，CPU等信息。 查找日志发现有错误，日志路径：/var/log/ambari-server/ambari-server.log 日志一直在打印这样的错误。从日志来看，无法连接collector。试着重启，如下 阅读全文
posted @ 2016-11-29 20:04 huiy_小溪 阅读(898) 评论(0) 推荐(0) 编辑
DbVisualizer连接hbase
摘要：1.添加phoneix驱动 (1).点击Tools >Driver Manager… (2).新建一个驱动，名称为phoenix（名称随意），选择phoenix的客户端驱动，驱动类如图所示 phoneix驱动可以在HDP包中获得： 2.新建Connection (1)点击Tools >Connect 阅读全文
posted @ 2016-11-28 18:59 huiy_小溪 阅读(1121) 评论(0) 推荐(0) 编辑
转载：HBASE配置说明
摘要：HBase 默认配置 ，原文：http://eclecl1314-163-com.iteye.com/blog/1474286 该文档是用hbase默认配置文件生成的，文件源是 hbase-default.xml (因翻译需要，被译者修改成中文注释). hbase.rootdir 这个目录是regi 阅读全文
posted @ 2016-11-28 14:23 huiy_小溪 阅读(791) 评论(0) 推荐(0) 编辑
java连接hbase报错
摘要：报错信息如下： The node /hbase is not in ZooKeeper. It should have been written by the master. Check the value configured in 'zookeeper.znode.parent'. There 阅读全文
posted @ 2016-11-28 12:07 huiy_小溪 阅读(1584) 评论(0) 推荐(0) 编辑
flume 集群安装
摘要：./pssh -h ./host/all.txt -P mkdir /usr/local/app ./pssh -h ./host/all.txt -P tar zxf /usr/local/software/apache-flume-1.6.0-bin.tar.gz -C /usr/local/a 阅读全文
posted @ 2016-04-18 14:39 huiy_小溪 阅读(315) 评论(0) 推荐(0) 编辑
Kafka主要参数详解（转）
摘要：原文档地址：http://kafka.apache.org/documentation.html############################# System ##############################唯一标识在集群中的ID，要求是正数。broker.id=0#服务端口， 阅读全文
posted @ 2016-04-18 14:30 huiy_小溪 阅读(393) 评论(0) 推荐(0) 编辑
原创：jar的名字可能影响maven的依赖下载
摘要：自己定义了phoenix4.6-client的依赖关系POM，如下：<project xmlns="http://maven.apache.org/POM/4.0.0" xmlns:xsi="http://www.w3.org/2001/XMLSchema-instance" xsi:schemaL 阅读全文
posted @ 2016-04-16 10:48 huiy_小溪 阅读(1270) 评论(0) 推荐(0) 编辑
原创：phoenix4.6.0连接hbase1.1.2(不使用phoenix-4.6.0-HBase-1.1-client.jar）
摘要：不使用phoenix的全量client包 阅读全文
posted @ 2016-04-15 11:00 huiy_小溪 阅读(797) 评论(0) 推荐(0) 编辑
转载：kafka参数详解
摘要：原文：http://kafka.apache.org/documentation.html############################# System ############################# #唯一标识在集群中的ID，要求是正数。 broker.id=0 #服务端口， 阅读全文
posted @ 2016-04-14 15:24 huiy_小溪 阅读(290) 评论(0) 推荐(0) 编辑

点击右上角即可分享
微信分享提示