随笔 - 148,  文章 - 0,  评论 - 5,  阅读 - 10786
  1. 数据导入

 

 

 

 

 

 

 

 

 

 

 

 

  1. 2.      数据清洗

 

  1. 数据分析处理

1.

 

 

2.insert overwrite table hahive hahive02_result02 select day_id,sale_nbr,sum(cnt),sum(money) where sale_nbr like ‘O%’ from hahive02 group by day_id,slae_nbr

3.

 

 

4.

 

 

  1. 4.      处理结果入库

 

 

 

 

 

导出数据到结果表

sqoop export --connect jdbc:mysql://master:3306/hive--username --password --table hahive02_result01 --fields-terminated-by ',' --export-dir /user/hive/warehouse/hahive02_result01

sqoop export --connect jdbc:mysql://master:3306/hive--username --password --table hahive02_result02 --fields-terminated-by ',' --export-dir /user/hive/warehouse/hahive02_result02

sqoop export --connect jdbc:mysql://master:3306/hive--username  --password --table hahive02_result03 --fields-terminated-by ',' --export-dir /user/hive/warehouse/hahive02_result03

sqoop export --connect jdbc:mysql://master:3306/hive--username  --password --table hahive02_result04 --fields-terminated-by ',' --export-dir /user/hive/warehouse/hahive02_result04

  1. 5.      可视化展示

 

 

 

 

 

 

 

 

 

 

 

 

 

 

posted on   sakura_xxg  阅读(482)  评论(1编辑  收藏  举报
编辑推荐:
· 从 HTTP 原因短语缺失研究 HTTP/2 和 HTTP/3 的设计差异
· AI与.NET技术实操系列:向量存储与相似性搜索在 .NET 中的实现
· 基于Microsoft.Extensions.AI核心库实现RAG应用
· Linux系列:如何用heaptrack跟踪.NET程序的非托管内存泄露
· 开发者必知的日志记录最佳实践
阅读排行:
· TypeScript + Deepseek 打造卜卦网站:技术与玄学的结合
· Manus的开源复刻OpenManus初探
· AI 智能体引爆开源社区「GitHub 热点速览」
· 从HTTP原因短语缺失研究HTTP/2和HTTP/3的设计差异
· 三行代码完成国际化适配,妙~啊~
历史上的今天:
2020-10-14 二柱子——四则运算——王建民
< 2025年3月 >
23 24 25 26 27 28 1
2 3 4 5 6 7 8
9 10 11 12 13 14 15
16 17 18 19 20 21 22
23 24 25 26 27 28 29
30 31 1 2 3 4 5

点击右上角即可分享
微信分享提示