摘要: 这篇博客是一个结合HDFS的Shell练习,相对简单。现有需求:每天1:00需要从系统上传一份昨天的日志文件到HDFS,日志文件的格式为access_2023_01_01.log,HDFS目录格式为20230101。这个需求是相对简单的,分为以下几个步骤: 获取昨天的日期 获取日期使用date命令, 阅读全文
posted @ 2023-01-24 21:07 ccql 阅读(47) 评论(0) 推荐(0) 编辑
摘要: 文章目录 一、HDFS回收站二、HDFS安全模式 一、HDFS回收站 HDFS在core-site.xml中进行配置后,会为每一个用户在“/user/用户名/.Trash/”地址创建一个回收站目录,每个被用户使用Shell命令行删除的文件或者目录,都会被移动到回收站目录中。但如果一直保存而不清空回收 阅读全文
posted @ 2023-01-24 11:54 ccql 阅读(47) 评论(0) 推荐(0) 编辑