01 2019 档案

SparkStreaming+Kafka整合

摘要：需求：使用SparkStreaming，并且结合Kafka，获取实时道路交通拥堵情况信息。目的：对监控点平均车速进行监控，可以实时获取交通拥堵情况信息。相关部门可以对交通拥堵情况采取措施。 e.g.1.通过广播方式，让司机改道。 2.通过实时交通拥堵情况数据，反映在一些APP上面，形成实时交通拥堵情况地图，方便用户查询。阅读全文

posted @ 2019-01-25 12:16 Hongten 阅读(1516) 评论(4) 推荐(0) 编辑

Hive+Sqoop+Mysql整合

摘要：Hive+Sqoop+Mysql整合在本文中，LZ随意想到了一个场景：车，道路，监控，摄像头阅读全文

posted @ 2019-01-16 17:48 Hongten 阅读(1749) 评论(0) 推荐(1) 编辑

crontab - 定时任务

摘要：crontab - 定时任务我的操作系统版本是CentOS-6 1.查看是否安装阅读全文

posted @ 2019-01-06 17:59 Hongten 阅读(442) 评论(0) 推荐(0) 编辑

Hive与Hbase整合

摘要：Hive与Hbase整合 1.文档　　Hive HBase Integration 阅读全文

posted @ 2019-01-06 15:17 Hongten 阅读(1413) 评论(0) 推荐(0) 编辑

关系数据库数据与hadoop数据进行转换的工具 - Sqoop

摘要：Sqoop 本文所使用的Sqoop版本为1.4.6 1.官网阅读全文