摘要:
第1章 Presto 1.1 Presto简介 1.1.1 Presto概念 1.1.2 Presto架构 1.1.3 Presto优缺点 1.1.4 Presto、Impala性能比较 https://blog.csdn.net/u012551524/article/details/7912453 阅读全文
posted @ 2020-11-06 10:09
十一vs十一
阅读(664)
评论(0)
推荐(0)
摘要:
#agent1(hadoop102)a1.sources = r1a1.channels = c1 c2a1.sinks = k1 k2 a1.sources.r1.type = execa1.sources.r1.command = tail -F /opt/module/flume/demo/1 阅读全文
posted @ 2020-11-06 09:44
十一vs十一
阅读(108)
评论(0)
推荐(0)
摘要:
查看所有topic: kafka-topics.sh --zookeeper hadoop102:2181 --list 查看具体的topic : kafka-topics.sh --zookeeper hadoop102:2181 --describe --topic first 创建topic 阅读全文
posted @ 2020-11-06 09:39
十一vs十一
阅读(102)
评论(0)
推荐(0)
摘要:
阅读全文
posted @ 2020-11-06 09:38
十一vs十一
阅读(60)
评论(0)
推荐(0)
摘要:
a1.sources=r1a1.channels=c1a1.sinks=k1 a1.sources.r1.type=TAILDIR#该文件中记录了source读取到的内容的位置#注意:一旦该文件丢失那么source后从该文件的开始位置重新读a1.sources.r1.positionFile = / 阅读全文
posted @ 2020-11-06 09:35
十一vs十一
阅读(181)
评论(0)
推荐(0)
摘要:
#a1是agent的名字#定义的source,channel,sink的个数可以是多个,中间用空格隔开#定义的名字可以随便起建议大家和官网的案例一致,方便后续查阅#定义sourcea1.sources = r1#定义channela1.channels = c1#定义sinka1.sinks = k 阅读全文
posted @ 2020-11-06 09:34
十一vs十一
阅读(96)
评论(0)
推荐(0)
摘要:
一 Flume版本 Flume大的版本分为0.9之前和0.9之后 0.9之前 : flume og 0.9之后 : flume ng 二 flume运行agent的命令 flume-ng --name agent的名字 --conf 配置文件的目录 --conf-file agent的配置文件(自己 阅读全文
posted @ 2020-11-06 09:33
十一vs十一
阅读(84)
评论(0)
推荐(0)
摘要:
a1.sources = r1a1.channels = c1a1.sinks = k1 a1.sources.r1.type = netcata1.sources.r1.bind = hadoop102a1.sources.r1.port = 44444#设置一个拦截器(用来向headers中添加 阅读全文
posted @ 2020-11-06 09:32
十一vs十一
阅读(50)
评论(0)
推荐(0)
摘要:
一 Flume版本 Flume大的版本分为0.9之前和0.9之后 0.9之前 : flume og 0.9之后 : flume ng 二 flume运行agent的命令 1.第一种方式 flume-ng agent --name agent的名字 --conf 配置文件的目录 --conf-file 阅读全文
posted @ 2020-11-06 09:30
十一vs十一
阅读(59)
评论(0)
推荐(0)
摘要:
#1.自定义agent的名字source,channel,sink组件a2.sources = r2a2.channels = c2a2.sinks = k2 #2.设置source的类型和配置a2.sources.r2.type = execa2.sources.r2.command = tail 阅读全文
posted @ 2020-11-06 09:29
十一vs十一
阅读(101)
评论(0)
推荐(0)