1.用Hive对爬虫大作业产生的文本文件(或者英文词频统计下载的英文长篇小说)进行词频统计。

启动Hadoop。

建表 ,把hdfs文件系统中文件夹里的文本文件load进去,写hiveQL命令统计

结果:

posted on 2018-05-22 18:54  224杨晓潮  阅读(109)  评论(0编辑  收藏  举报