Hadoop综合大作业

1.用Hive对爬虫大作业产生的文本文件(三星S9手机论坛)进行词频统计。

 

(1)start-dfs.sh命令,启动所有服务

 

(2)创建samsung表,,进行数据

 

 

(3)创建查表

 

 

(4)查看统计结果

 

 

2.用Hive对csv文件进行数据分析,写一篇博客描述你的分析过程和分析结果。

 

将csv格式的数据上传到hdfs

 

进入文件路径,查看数据

 

将文件上传到HDFS

 

查看成功上传的文件的前20个数据

 

查看数据的总条数

posted @ 2018-05-25 19:28  088陈志鸿  阅读(125)  评论(0编辑  收藏  举报