2018年9月1日
HDFS数据定时采集demo 简单
摘要： 1、流程 启动一个定时任务： --定时监测日志源目录 --获取需要采集的文件 --移动这些文件到一个待上传临时目录中 --遍历待上传目录中各个文件，逐一传输到HDFS的目标路径，同时将传输完成的文件移动到备份目录中去 启动一个定时任务 --探测备份目录中的备份数据，检查是否已经超出最长备份时长，如果 阅读全文
posted @ 2018-09-01 11:18 赵先先森 阅读(736) 评论(0) 推荐(0) 编辑