摘要: 1.用Hive对爬虫大作业产生的文本文件(或者英文词频统计下载的英文长篇小说)词频统计。 启动hive: 将网络爬虫大作业产生的文件cgpword.txt上传至hdfs: 创建原始文档表: 导入文件数据: 进行词频统计,结果放在表cgp_count里: 查看统计结果: 2.用Hive对爬虫大作业产生 阅读全文
posted @ 2018-05-20 21:41 201506110167陈广鹏 阅读(143) 评论(0) 推荐(0) 编辑