12 2020 档案

网站用户行为分析

摘要：网站用户行为分析步骤 1.1 本地数据集上传到数据仓库Hive 数据集下载与查看数据集预处理把数据集导入HDFS中在Hive上创建数据库 1.2 Hive数据分析给出数据分析需求用select语句实现数据分析数据分析结果查看与保存 1.3 Hive、MySQL、HBase数据互导 Hi 阅读全文

posted @ 2020-12-30 15:50 小王子C 阅读(139) 评论(0) 推荐(0) 编辑

Sqoop安装与使用

摘要：使用sqoop进行将Hive 词频统计的结果数据传输到Mysql中。 mysql准备接受数据的数据库与表 hive准备待传输的数据 sqoop进行数据传输 mysql查看传输结果先用测试文件做实验，成功后将电子书的统计结果传输出mysql中。阅读全文

posted @ 2020-12-12 18:23 小王子C 阅读(67) 评论(0) 推荐(0) 编辑

Hive 操作与应用词频统计

摘要：一、hive用本地文件进行词频统计 1.准备本地txt文件 2.启动hadoop，启动hive 3.创建数据库，创建文本表 4.映射本地文件的数据到文本表中 5.hql语句进行词频统计交将结果保存到结果表中。 6.查看统计结果二、hive用HDFS上的文件进行词频统计 1.准备电子书或其它大的文本阅读全文

posted @ 2020-12-04 11:02 小王子C 阅读(94) 评论(0) 推荐(0) 编辑