2018年5月25日
hadoop大作业
摘要： 1.用Hive对爬虫大作业产生的文本文件（或者英文词频统计下载的英文长篇小说）词频统计。 1.启动hadoop 2.Hdfs上创建文件夹并查看 3.上传英文词频统计文本至hdfs 1、把英文文章的每个单词放到列表里，并统计列表长度； 2、遍历列表，对每个单词出现的次数进行统计，并将结果存储在字典中； 阅读全文
posted @ 2018-05-25 19:23 084-苏文遥 阅读(166) 评论(0) 推荐(0) 编辑