hive mysql 初始化
摘要:原文链接:https://juejin.im/post/59c3f8f75188255be81f91d9#heading-17 Apache Hive-2.3.0 快速搭建与使用 Hive 简介 Hive 是一个基于 hadoop 的开源数据仓库工具,用于存储和处理海量结构化数据。它把海量数据存储于
阅读全文
hive 的理解
摘要:什么是Hive 转自: https://blog.csdn.net/qingqing7/article/details/79102691 1、Hive简介 Hive 是建立在 Hadoop 上的数据仓库基础构架。它提供了一系列的工具,可以用来进行数据提取转化加载(ETL),这是一种可以存储、查询和分
阅读全文
hive 踩坑
摘要:1、 create tabl metastore.MetaStoreDirectSql: Self-test query [select "DB_ID" from "DBS"] failed; direct SQL is disabledjavax.jdo.JDODataStoreException
阅读全文
hbase 调试各种报错
摘要:1、master is initializing 怎么都不知道怎么回事,直接从hbase 2.0 换到了 hbase 2.1 2、java.lang.ClassNotFoundException: org.apache.htrace.SamplerBuilder hbase 版本2.1 cp $HB
阅读全文
hbase shell常用命令
摘要:hbase shell 官网:https://hbase.apache.org/book.html $ ./bin/hbase shell常见问题: ERROR: org.apache.hadoop.hbase.PleaseHoldException: Master is initializing
阅读全文
mysql 性能测试工具 mysqlslap
摘要:原文链接: https://my.oschina.net/moooofly/blog/152547 连接数据库:
阅读全文
flume kafka 配置指南
摘要:1、官方网站也有配置: https://flume.apache.org/FlumeUserGuide.html#kafka-source 2、clodera 官方配置 https://www.cloudera.com/documentation/kafka/2-0-x/topics/kafka_f
阅读全文
hadoop zookeeper高可用
摘要:原文地址: https://blog.csdn.net/dingchenxixi/article/details/51131493 core-site.xml yarn-site.xml
阅读全文
vim字符串替换及小技巧
摘要:vi/vim 中可以使用 :s 命令来替换字符串。以前只会使用一种格式来全文替换,今天发现该命令有很多种写法(vi 真是强大啊,还有很多需要学习),记录几种在此,方便以后查询。 :s/vivian/sky/ 替换当前行第一个 vivian 为 sky :s/vivian/sky/g 替换当前行所有
阅读全文
php urldecode 与rawdecode
摘要:php urldecode 解码给出的已编码字符串中的任何 %##。 加号('+')被解码成一个空格字符php rawurldecode返回字符串,此字符串中百分号(%)后跟两位十六进制数的序列都将被替换成原义字符。
阅读全文
flume 使用手册
摘要:以下jie皆来自官网: 1:首先版本是flume 1.8 查看版本: bin/flume-ng version 2:配置与启动 Defining the flow Using environment variables in configuration files¶ Flume has the ab
阅读全文
flume 实际的使用
摘要:1、No configuration found for this host:seqGenSrc 如果上面的命令不添加最后的 -n seqGenSrc 就会报标题的错误:添加上即可正常: 以下是sh文件的copy:
阅读全文
zookeeper 常用cLi命令
摘要:一、 ./zkCli.sh -server master:2181 1、查看版本信息: 2、四字符命令(): 官网:https://zookeeper.apache.org/doc/r3.4.8/zookeeperAdmin.html#sc_zkCommands
阅读全文
kafka 消费者 timeout 6000
摘要:kafka 消费者 timeout 6000 1:查看zookeeper 的状态,kafka默认是自带zookeeper配置,我建议安装单独的zookeeper 服务,并且配置文件也很简单..直接改zookeeper 的host 跟port 就行; zookeeper 状态查看命名,参考官网:htt
阅读全文