随笔分类 -  大数据

ETL工具之kittle使用案例整理
摘要：1.kettle案例一抽取gz格式文本内容保存到mongodb https://blog.csdn.net/zzq900503/article/details/78658649 2.kettle案例二抽取mysql数据保存到mongodb https://blog.csdn.net/zzq90050 阅读全文
posted @ 2020-10-15 13:06 TwinStudio 阅读(335) 评论(0) 推荐(0) 编辑
大数据从入门到精通
摘要：大数据被认为是“未来的新石油”，在社会生产、流通、分配、消费活动以及经济运行机制等方面发挥着重要的作用。 作为 IT 类职业中的“大熊猫”，大数据工程师的收入待遇可以说达到了同类的顶级。国内 IT、通讯、行业招聘中，有 10％ 都是和大数据相关的，且比例还在上升。“大数据时代的到来很突然，在国内发展 阅读全文
posted @ 2020-08-20 10:24 TwinStudio 阅读(488) 评论(0) 推荐(0) 编辑
大数据初学者应该知道的知识
摘要：导读： 第一章：初识Hadoop 第二章：更高效的WordCount 第三章：把别处的数据搞到Hadoop上 第四章：把Hadoop上的数据搞到别处去 第五章：快一点吧，我的SQL 第六章：一夫多妻制 第七章：越来越多的分析任务 第八章：我的数据要实时 第九章：我的数据要对外 第十章：牛逼高大上的机 阅读全文
posted @ 2019-02-17 07:34 TwinStudio 阅读(456) 评论(0) 推荐(0) 编辑
工业4.0时代，物联网、大数据、区块链共同开启智能化时代
摘要：近几年，工业4.0的概念时常伴随着世界各大经济论坛、科技论坛出现，其他几个也很熟悉科技名词新贵还有：物联网、人工智能、大数据和区块链。这几天正在大连召开的达沃斯经济论坛的主题正是“在第四次工业革命中实现包容性增长”，似乎“科技创新”的讨论热情尤其高涨。 所谓工业革命，核心是指由于科学技术上的重大突破 阅读全文
posted @ 2018-01-23 09:16 TwinStudio 阅读(439) 评论(0) 推荐(0) 编辑
怎样设计一个良好大数据处理的解决方案？
摘要：1、项目介绍 下图为目前项目的整体框架图，大至如下： 这是一个winform系统，采用了.NET Framework3.5和SQL Server2008编写与存储。这是一个某车辆监控管理系统，分为前端采集车辆信息，然后存储到后台数据库服务器上，整个系统的大致流程是：前端采集的图片数据，通过交换机统一 阅读全文
posted @ 2016-12-23 08:50 TwinStudio 阅读(408) 评论(0) 推荐(0) 编辑

点击右上角即可分享
微信分享提示