摘要: 团队从去年就开始用DolphinScheduler了,社区也比较火,最近抽时间大概看了下源码做了简单的对主流程做了下总结,其他很多东西还没有来得及看的很仔细,比如DAG如何生成,具体master和worker容错机制,任务依赖等。 阅读全文
posted @ 2022-01-07 09:15 曹振华 阅读(129) 评论(0) 推荐(0) 编辑
摘要: 为什么我们需要 seatunnel Databricks 开源的 Apache Spark 对于分布式数据处理来说是一个伟大的进步。我们在使用 Spark 时发现了很多可圈可点之处,同时我们也发现了我们的机会 —— 通过我们的努力让Spark的使用更简单,更高效,并将业界和我们使用Spark的优质经 阅读全文
posted @ 2021-12-24 09:32 曹振华 阅读(4837) 评论(0) 推荐(0) 编辑
摘要: 1.基于数据集的处理:从物理存储上加载数据,然后操作数据,然后写入数据到物理设备; 基于数据集的操作不适应的场景:不适合于大量的迭代:不适合交互式查询:每次查询都需要对磁盘进行交互.基于数据流的方式不能够复用曾经的结果或者中间的结果;2. RDD弹性数据集特点: A)自动的进行内存和磁盘数据的... 阅读全文
posted @ 2016-01-17 21:41 曹振华 阅读(667) 评论(0) 推荐(0) 编辑
摘要: 最近这几年一直在用java搞大数据方面的研究,一直都在自己的摸索中前进,当然也在网上找到一些比较好的教程,能帮助自己更快更有效的掌握各种技术,最近在阅读spark的源码, spark确实很强大,一种堆栈解决各种大数据的问题.Spark亚太研究院决胜大数据时代100期公益大讲堂大家可以去看这个视频,王... 阅读全文
posted @ 2015-03-06 10:07 曹振华 阅读(243) 评论(0) 推荐(0) 编辑
摘要: 博客已经搬家,请访问如下地址:http://www.czhphp.com一,安装: wget http://www.monkey.org/~provos/libevent-1.4.12-stable.tar.gztar zxvf libevent-1.4.12-stable.tar.gzcd libevent-1.4.12-stable/./configure --prefix=/usrmake && make install/sbin/ldconfigcd ../wget http://launchpad.net/gearmand/trunk/0.9/+download/ge 阅读全文
posted @ 2012-05-28 14:06 曹振华 阅读(375) 评论(0) 推荐(0) 编辑
摘要: 博客已经搬家,请访问如下地址:http://www.czhphp.com Mysql性能优化教程Mysql执行优化认识数据索引为什么使用数据索引能提高效率关系型数据库的数据索引(Btree及常见索引结构)的存储是有序的。在有序的情况下,通过索引查询一个数据是无需遍历索引记录的关系型数据库数据索引的查询效率趋近于二分法查询效率,趋近于log2(N)。极端情况下(更新请求少,更新实时要求低,查询请求频繁),建立单向有序序列可替代数据索引。HASH索引的查询效率是寻址操作,趋近于1次查询,比有序索引查询效率更高,但是不支持比对查询,区间查询,排序等操作,仅支持key-value类型查询。不是本文重点 阅读全文
posted @ 2012-02-27 23:03 曹振华 阅读(3048) 评论(0) 推荐(1) 编辑
摘要: 关于移动营业厅,有需要办理的可以联系吗,推广整佣金,费用一部分来自于办卡的钱,另外一部分来自于消耗花费的佣金,卡是正规电信卡,套餐有6月(流量超出部分500M 1元),29月,199月(不限流量) https://ydyyt.phtion.com/wap/html/zhuanti.html?yytC 阅读全文
posted @ 2022-03-17 09:21 曹振华 阅读(47) 评论(0) 推荐(0) 编辑
摘要: 职责: 1、负责公司供应链优化产品整体系统的研发工作,能带领团队作战;2、愿意接受B端业务逻辑复杂性、海量数据、服务高可用的挑战,推动系统可用性和可扩展性的提升;3、具有良好的系统抽象能力,在系统中台能力建设方面能提出创新的解决思路和方案,为团队引入创新技术。4、在部署,实施方面构建一体化的产品体系 阅读全文
posted @ 2021-12-31 15:10 曹振华 阅读(57) 评论(0) 推荐(0) 编辑
摘要: 王家林亲授《DT大数据梦工厂》大数据实战视频 Scala 深入浅出实战经典(1-97讲)完整视频、PPT、代码下载:百度云盘:http://pan.baidu.com/s/1c0noOt6 腾讯微云:http://url.cn/TnGbdC 360云盘:http://yunpan.cn/cQ4c2U... 阅读全文
posted @ 2015-09-12 20:15 曹振华 阅读(349) 评论(0) 推荐(0) 编辑
摘要: 王家林亲授《DT大数据梦工厂》大数据实战视频 Scala 深入浅出实战经典(1-87讲)完整视频、PPT、代码下载:百度云盘:http://pan.baidu.com/s/1c0noOt6 腾讯微云:http://url.cn/TnGbdC 360云盘:http://yunpan.cn/cQ4c2U... 阅读全文
posted @ 2015-09-09 21:20 曹振华 阅读(316) 评论(0) 推荐(0) 编辑
摘要: 王家林亲授《DT大数据梦工厂》大数据实战视频 Scala 深入浅出实战经典(1-87讲)完整视频、PPT、代码下载:百度云盘:http://pan.baidu.com/s/1c0noOt6 腾讯微云:http://url.cn/TnGbdC 360云盘:http://yunpan.cn/cQ4c2U... 阅读全文
posted @ 2015-09-07 21:26 曹振华 阅读(384) 评论(0) 推荐(0) 编辑
摘要: 王家林亲授《DT大数据梦工厂》大数据实战视频 Scala 深入浅出实战经典(1-87讲)完整视频、PPT、代码下载:百度云盘:http://pan.baidu.com/s/1c0noOt6 腾讯微云:http://url.cn/TnGbdC 360云盘:http://yunpan.cn/cQ4c2U... 阅读全文
posted @ 2015-09-06 21:14 曹振华 阅读(284) 评论(0) 推荐(0) 编辑
摘要: 王家林亲授《DT大数据梦工厂》大数据实战视频 Scala 深入浅出实战经典(1-87讲)完整视频、PPT、代码下载:百度云盘:http://pan.baidu.com/s/1c0noOt6 腾讯微云:http://url.cn/TnGbdC 360云盘:http://yunpan.cn/cQ4c2U... 阅读全文
posted @ 2015-09-05 14:49 曹振华 阅读(234) 评论(0) 推荐(0) 编辑
摘要: 王家林亲授《DT大数据梦工厂》大数据实战视频 Scala 深入浅出实战经典(1-87讲)完整视频、PPT、代码下载:百度云盘:http://pan.baidu.com/s/1c0noOt6 腾讯微云:http://url.cn/TnGbdC 360云盘:http://yunpan.cn/cQ4c2U... 阅读全文
posted @ 2015-09-01 18:32 曹振华 阅读(396) 评论(0) 推荐(0) 编辑
摘要: 王家林亲授《DT大数据梦工厂》大数据实战视频 Scala 深入浅出实战经典(1-87讲)完整视频、PPT、代码下载:百度云盘:http://pan.baidu.com/s/1c0noOt6 腾讯微云:http://url.cn/TnGbdC 360云盘:http://yunpan.cn/cQ4c2U... 阅读全文
posted @ 2015-08-29 17:27 曹振华 阅读(360) 评论(0) 推荐(0) 编辑
摘要: 王家林亲授《DT大数据梦工厂》大数据实战视频 Scala 深入浅出实战经典(1-87讲)完整视频、PPT、代码下载:百度云盘:http://pan.baidu.com/s/1c0noOt6 腾讯微云:http://url.cn/TnGbdC 360云盘:http://yunpan.cn/cQ4c2U... 阅读全文
posted @ 2015-08-28 21:05 曹振华 阅读(289) 评论(0) 推荐(0) 编辑
摘要: 王家林亲授《DT大数据梦工厂》大数据实战视频 Scala 深入浅出实战经典(1-87讲)完整视频、PPT、代码下载:百度云盘:http://pan.baidu.com/s/1c0noOt6 腾讯微云:http://url.cn/TnGbdC 360云盘:http://yunpan.cn/cQ4c2U... 阅读全文
posted @ 2015-08-27 13:11 曹振华 阅读(743) 评论(0) 推荐(0) 编辑
摘要: 王家林亲授《DT大数据梦工厂》大数据实战视频 Scala 深入浅出实战经典(1-87讲)完整视频、PPT、代码下载:百度云盘:http://pan.baidu.com/s/1c0noOt6 腾讯微云:http://url.cn/TnGbdC 360云盘:http://yunpan.cn/cQ4c2U... 阅读全文
posted @ 2015-08-25 16:48 曹振华 阅读(393) 评论(0) 推荐(0) 编辑
摘要: 王家林亲授《DT大数据梦工厂》大数据实战视频 Scala 深入浅出实战经典(1-87讲)完整视频、PPT、代码下载:百度云盘:http://pan.baidu.com/s/1c0noOt6 腾讯微云:http://url.cn/TnGbdC 360云盘:http://yunpan.cn/cQ4c2U... 阅读全文
posted @ 2015-08-24 15:26 曹振华 阅读(667) 评论(0) 推荐(0) 编辑
摘要: 王家林亲授《DT大数据梦工厂》大数据实战视频 Scala 深入浅出实战经典(1-87讲)完整视频、PPT、代码下载:百度云盘:http://pan.baidu.com/s/1c0noOt6 腾讯微云:http://url.cn/TnGbdC 360云盘:http://yunpan.cn/cQ4c2U... 阅读全文
posted @ 2015-08-22 09:32 曹振华 阅读(266) 评论(0) 推荐(0) 编辑
摘要: 王家林亲授《DT大数据梦工厂》大数据实战视频 Scala 深入浅出实战经典(1-87讲)完整视频、PPT、代码下载:百度云盘:http://pan.baidu.com/s/1c0noOt6 腾讯微云:http://url.cn/TnGbdC 360云盘:http://yunpan.cn/cQ4c2U... 阅读全文
posted @ 2015-08-21 17:00 曹振华 阅读(802) 评论(0) 推荐(0) 编辑
摘要: 王家林亲授《DT大数据梦工厂》大数据实战视频 Scala 深入浅出实战经典(1-87讲)完整视频、PPT、代码下载:百度云盘:http://pan.baidu.com/s/1c0noOt6 腾讯微云:http://url.cn/TnGbdC 360云盘:http://yunpan.cn/cQ4c2U... 阅读全文
posted @ 2015-08-20 15:05 曹振华 阅读(215) 评论(0) 推荐(0) 编辑
摘要: 王家林亲授《DT大数据梦工厂》大数据实战视频 Scala 深入浅出实战经典(1-87讲)完整视频、PPT、代码下载:百度云盘:http://pan.baidu.com/s/1c0noOt6 腾讯微云:http://url.cn/TnGbdC 360云盘:http://yunpan.cn/cQ4c2U... 阅读全文
posted @ 2015-08-19 19:22 曹振华 阅读(319) 评论(0) 推荐(0) 编辑
摘要: 王家林亲授《DT大数据梦工厂》大数据实战视频 Scala 深入浅出实战经典(1-87讲)完整视频、PPT、代码下载:百度云盘:http://pan.baidu.com/s/1c0noOt6 腾讯微云:http://url.cn/TnGbdC 360云盘:http://yunpan.cn/cQ4c2U... 阅读全文
posted @ 2015-08-18 17:37 曹振华 阅读(454) 评论(0) 推荐(0) 编辑
摘要: package com.parllay.scala.type_parameterizitorimport scala.io.{Source, BufferedSource}/** * Created by richard on 15-8-17. * 第58讲:Scala中Abstract Types... 阅读全文
posted @ 2015-08-17 06:49 曹振华 阅读(325) 评论(0) 推荐(0) 编辑
摘要: 王家林亲授《DT大数据梦工厂》大数据实战视频 Scala 深入浅出实战经典(1-87讲)完整视频、PPT、代码下载:百度云盘:http://pan.baidu.com/s/1c0noOt6 腾讯微云:http://url.cn/TnGbdC 360云盘:http://yunpan.cn/cQ4c2U... 阅读全文
posted @ 2015-08-15 20:27 曹振华 阅读(353) 评论(0) 推荐(0) 编辑
摘要: 王家林亲授《DT大数据梦工厂》大数据实战视频 Scala 深入浅出实战经典(1-64讲)完整视频、PPT、代码下载:百度云盘:http://pan.baidu.com/s/1c0noOt6 腾讯微云:http://url.cn/TnGbdC 360云盘:http://yunpan.cn/cQ4c2U... 阅读全文
posted @ 2015-08-12 17:51 曹振华 阅读(680) 评论(0) 推荐(0) 编辑
摘要: 王家林亲授《DT大数据梦工厂》大数据实战视频 Scala 深入浅出实战经典(1-64讲)完整视频、PPT、代码下载:百度云盘:http://pan.baidu.com/s/1c0noOt6 腾讯微云:http://url.cn/TnGbdC 360云盘:http://yunpan.cn/cQ4c2U... 阅读全文
posted @ 2015-08-11 21:28 曹振华 阅读(382) 评论(0) 推荐(0) 编辑
摘要: 王家林亲授《DT大数据梦工厂》大数据实战视频 Scala 深入浅出实战经典(1-64讲)完整视频、PPT、代码下载:百度云盘:http://pan.baidu.com/s/1c0noOt6 腾讯微云:http://url.cn/TnGbdC 360云盘:http://yunpan.cn/cQ4c2U... 阅读全文
posted @ 2015-08-10 23:05 曹振华 阅读(319) 评论(0) 推荐(0) 编辑
摘要: 王家林亲授《DT大数据梦工厂》大数据实战视频 Scala 深入浅出实战经典(1-64讲)完整视频、PPT、代码下载:百度云盘:http://pan.baidu.com/s/1c0noOt6 腾讯微云:http://url.cn/TnGbdC 360云盘:http://yunpan.cn/cQ4c2U... 阅读全文
posted @ 2015-08-09 19:24 曹振华 阅读(477) 评论(0) 推荐(0) 编辑
摘要: 王家林亲授《DT大数据梦工厂》大数据实战视频 Scala 深入浅出实战经典(1-64讲)完整视频、PPT、代码下载:百度云盘:http://pan.baidu.com/s/1c0noOt6 腾讯微云:http://url.cn/TnGbdC 360云盘:http://yunpan.cn/cQ4c2U... 阅读全文
posted @ 2015-08-07 21:04 曹振华 阅读(338) 评论(0) 推荐(0) 编辑
摘要: 王家林亲授《DT大数据梦工厂》大数据实战视频 Scala 深入浅出实战经典(1-64讲)完整视频、PPT、代码下载:百度云盘:http://pan.baidu.com/s/1c0noOt6 腾讯微云:http://url.cn/TnGbdC 360云盘:http://yunpan.cn/cQ4c2U... 阅读全文
posted @ 2015-08-06 22:25 曹振华 阅读(448) 评论(0) 推荐(0) 编辑
摘要: 王家林亲授《DT大数据梦工厂》大数据实战视频 Scala 深入浅出实战经典(1-64讲)完整视频、PPT、代码下载:百度云盘:http://pan.baidu.com/s/1c0noOt6 腾讯微云:http://url.cn/TnGbdC 360云盘:http://yunpan.cn/cQ4c2U... 阅读全文
posted @ 2015-08-05 22:34 曹振华 阅读(378) 评论(0) 推荐(0) 编辑
摘要: 王家林亲授《DT大数据梦工厂》大数据实战视频 Scala 深入浅出实战经典(1-64讲)完整视频、PPT、代码下载:百度云盘:http://pan.baidu.com/s/1c0noOt6 腾讯微云:http://url.cn/TnGbdC 360云盘:http://yunpan.cn/cQ4c2U... 阅读全文
posted @ 2015-08-04 21:01 曹振华 阅读(436) 评论(0) 推荐(0) 编辑
摘要: 王家林亲授《DT大数据梦工厂》大数据实战视频 Scala 深入浅出实战经典(1-64讲)完整视频、PPT、代码下载:百度云盘:http://pan.baidu.com/s/1c0noOt6 腾讯微云:http://url.cn/TnGbdC 360云盘:http://yunpan.cn/cQ4c2U... 阅读全文
posted @ 2015-08-03 16:49 曹振华 阅读(402) 评论(0) 推荐(0) 编辑
摘要: 王家林亲授《DT大数据梦工厂》大数据实战视频 Scala 深入浅出实战经典(1-64讲)完整视频、PPT、代码下载:百度云盘:http://pan.baidu.com/s/1c0noOt6 腾讯微云:http://url.cn/TnGbdC 360云盘:http://yunpan.cn/cQ4c2U... 阅读全文
posted @ 2015-08-01 17:42 曹振华 阅读(5311) 评论(0) 推荐(0) 编辑
摘要: 王家林亲授《DT大数据梦工厂》大数据实战视频 Scala 深入浅出实战经典(1-64讲)完整视频、PPT、代码下载:百度云盘:http://pan.baidu.com/s/1c0noOt6 腾讯微云:http://url.cn/TnGbdC 360云盘:http://yunpan.cn/cQ4c2U... 阅读全文
posted @ 2015-07-30 22:41 曹振华 阅读(642) 评论(0) 推荐(0) 编辑
摘要: 王家林亲授《DT大数据梦工厂》大数据实战视频 Scala 深入浅出实战经典(1-64讲)完整视频、PPT、代码下载:百度云盘:http://pan.baidu.com/s/1c0noOt6 腾讯微云:http://url.cn/TnGbdC 360云盘:http://yunpan.cn/cQ4c2U... 阅读全文
posted @ 2015-07-29 21:43 曹振华 阅读(567) 评论(0) 推荐(0) 编辑
摘要: 王家林亲授《DT大数据梦工厂》大数据实战视频 Scala 深入浅出实战经典(1-64讲)完整视频、PPT、代码下载:百度云盘:http://pan.baidu.com/s/1c0noOt6 腾讯微云:http://url.cn/TnGbdC 360云盘:http://yunpan.cn/cQ4c2U... 阅读全文
posted @ 2015-07-28 19:59 曹振华 阅读(407) 评论(0) 推荐(0) 编辑
摘要: 王家林亲授《DT大数据梦工厂》大数据实战视频 Scala 深入浅出实战经典(1-64讲)完整视频、PPT、代码下载:百度云盘:http://pan.baidu.com/s/1c0noOt6 腾讯微云:http://url.cn/TnGbdC 360云盘:http://yunpan.cn/cQ4c2U... 阅读全文
posted @ 2015-07-27 21:11 曹振华 阅读(1004) 评论(0) 推荐(0) 编辑
摘要: Scala 深入浅出实战经典 第41讲:List继承体系实现内幕和方法操作源码揭秘package com.parllay.scala.dataset/** * Created by richard on 15-7-25. * 第41讲:List继承体系实现内幕和方法操作源码揭秘 */object L... 阅读全文
posted @ 2015-07-26 19:45 曹振华 阅读(302) 评论(0) 推荐(0) 编辑
摘要: 王家林亲授《DT大数据梦工厂》大数据实战视频 Scala 深入浅出实战经典(1-64讲)完整视频、PPT、代码下载:百度云盘:http://pan.baidu.com/s/1c0noOt6 腾讯微云:http://url.cn/TnGbdC 360云盘:http://yunpan.cn/cQ4c2U... 阅读全文
posted @ 2015-07-25 22:47 曹振华 阅读(1031) 评论(0) 推荐(0) 编辑
摘要: 王家林亲授《DT大数据梦工厂》大数据实战视频 Scala 深入浅出实战经典(1-64讲)完整视频、PPT、代码下载:百度云盘:http://pan.baidu.com/s/1c0noOt6 腾讯微云:http://url.cn/TnGbdC 360云盘:http://yunpan.cn/cQ4c2U... 阅读全文
posted @ 2015-07-24 19:29 曹振华 阅读(942) 评论(0) 推荐(0) 编辑