摘要: 1.用Hive对爬虫大作业产生的文本文件(或者英文词频统计下载的英文长篇小说)进行词频统计。 先下载英语长篇文章到wc文件下 上传5000-8文件到hdfs 进入hive,创建新表 在hdfs中的5000-8.txt导入到english表中 查看该表中的信息 进行词频统计存放在english_cou 阅读全文
posted @ 2018-05-23 23:18 198郑锦诚 阅读(128) 评论(0) 推荐(0) 编辑