|NO.Z.00038|——————————|BigDataEnd|——|Hadoop&实时数仓.V18|——|项目.v18|需求一:数据处理&全量查询.V2|——|ODS:mysql:yanqi_trade_orders~~hbash:yanqi_trade_orders|

一、编程实现第一层:ODS层数据处理:查询城市、省份、订单总额、订单总数----全量查询
### --- 编程实现第一层:ODS层数据处理:查询城市、省份、订单总额、订单总数----全量查询

~~~     ods层数据处理
~~~     ods:同第三部分:mysql--(binlog) canal----kafka——>yanqi_trade_orders
~~~     下沉mysql:yanqi_trade_orders表到hbash:yanqi_trade_orders表中
二、编译打印运行程序
### --- 运行程序详参

~~~     # 程序所属文件:
~~~     |实时数仓|实时数仓:项目$创建项目:创建maven工程EbProject.V1|
~~~     |实时数仓|实时数仓:项目$ODS层处理:将kafka中的维表写入DIM层.V3|
~~~     # 运行程序所属文件:
~~~     |实时数仓|实时数仓:项目$ODS层处理:将kafka中的维表写入DIM层.V3|        
### --- 运行程序结果输出

~~~     # 在hbash中创建yanqi_trade_orders表
[root@hadoop02 ~]# /opt/yanqi/servers/hbase-1.3.1/bin/hbase shell
hbase(main):056:0> create 'yanqi_trade_orders' , 'f1'
~~~     # hbash表中获取到数据

[root@hadoop02 ~]# hbase shell
hbase(main):017:0> scan 'yanqi_trade_orders'
~~~共计27条数据
27 row(s) in 0.1630 seconds

 
 
 
 
 
 
 
 
 

Walter Savage Landor:strove with none,for none was worth my strife.Nature I loved and, next to Nature, Art:I warm'd both hands before the fire of life.It sinks, and I am ready to depart
                                                                                                                                                   ——W.S.Landor

 

 

posted on   yanqi_vip  阅读(23)  评论(0编辑  收藏  举报

相关博文:
阅读排行:
· 无需6万激活码!GitHub神秘组织3小时极速复刻Manus,手把手教你使用OpenManus搭建本
· Manus爆火,是硬核还是营销?
· 终于写完轮子一部分:tcp代理 了,记录一下
· 别再用vector<bool>了!Google高级工程师:这可能是STL最大的设计失误
· 单元测试从入门到精通
< 2025年3月 >
23 24 25 26 27 28 1
2 3 4 5 6 7 8
9 10 11 12 13 14 15
16 17 18 19 20 21 22
23 24 25 26 27 28 29
30 31 1 2 3 4 5

导航

统计

点击右上角即可分享
微信分享提示