2021年7月5日
HDFS API之编写词频统计框架
摘要： package com.imooc.bigdata.hadoop.hdfs; /* * 使用HDFS API完成WordCount统计 * * 需求：统计HDFS上的文件的词频统计，然后将统计结果输出到HDFS * * 功能拆解： * 1） 读取HDFS上的文件 ==》 HDFS API * 2） 阅读全文
posted @ 2021-07-05 16:26 酱汁怪兽 阅读(66) 评论(0) 推荐(0) 编辑
使用Java Api之删除文件
摘要： package com.imooc.bigdata.hadoop.hdfs; import org.apache.hadoop.conf.Configuration; import org.apache.hadoop.fs.*; import org.apache.hadoop.io.IOUtils 阅读全文
posted @ 2021-07-05 14:52 酱汁怪兽 阅读(254) 评论(0) 推荐(0) 编辑
使用Java API之查看文件块信息
摘要： package com.imooc.bigdata.hadoop.hdfs; import org.apache.hadoop.conf.Configuration; import org.apache.hadoop.fs.*; import org.apache.hadoop.io.IOUtils 阅读全文
posted @ 2021-07-05 14:42 酱汁怪兽 阅读(157) 评论(0) 推荐(0) 编辑
使用Java API之递归方式 列出目标文件夹中的所有内容
摘要： package com.imooc.bigdata.hadoop.hdfs; import org.apache.hadoop.conf.Configuration; import org.apache.hadoop.fs.*; import org.apache.hadoop.io.IOUtils 阅读全文
posted @ 2021-07-05 14:15 酱汁怪兽 阅读(167) 评论(0) 推荐(0) 编辑
使用Java API之列出目标文件夹下的所有内容
摘要： package com.imooc.bigdata.hadoop.hdfs; import org.apache.hadoop.conf.Configuration; import org.apache.hadoop.fs.FSDataOutputStream; import org.apache. 阅读全文
posted @ 2021-07-05 10:33 酱汁怪兽 阅读(125) 评论(0) 推荐(0) 编辑