2020 年 7月 23 日随笔档案 - 大羽治不了水

2020年7月23日

摘要：归档/tmp/mes/2020072310 是将HDFS上的那个目录下的文件归档。/tmp/mes/20200723 归档到那个目录下 hadoop archive -archiveName input.har -p /tmp/mes/2020072310 /tmp/mes/20200723 归档之阅读全文

posted @ 2020-07-23 18:00 大羽治不了水阅读(680) 评论(0) 推荐(0) 编辑

flume从Kafka消费数据到HDFS

摘要： #source的名字 agent.sources = kafkaSource # channels的名字，建议按照type来命名 agent.channels = memoryChannel # sink的名字，建议按照目标来命名 agent.sinks = hdfsSink # 指定source使阅读全文

posted @ 2020-07-23 17:36 大羽治不了水阅读(802) 评论(0) 推荐(0) 编辑