java/Java Pyton 大数据 Hadoop Spark

上一页 1 2 3 4 5 6 7 ··· 9 下一页
摘要: 在很多的流处理框架的介绍中,都会说kafka是一个可靠的数据源,并且推荐使用Kafka当作数据源来进行使用。这是因为与其他消息引擎系统相比,kafka提供了可靠的数据保存及备份机制。并且通过消费者位移这一概念,可以让消费者在因某些原因宕机而重启后,可以轻易得回到宕机前的位置。 但其实kafka的可靠 阅读全文
posted @ 2020-03-16 18:12 zzzzMing 阅读(2812) 评论(1) 推荐(1) 编辑
摘要: 本篇主要介绍kafka的分区和副本,因为这两者是有些关联的,所以就放在一起来讲了,后面顺便会给出一些对应的配置以及具体的实现代码,以供参考~ 1.kafka分区机制 分区机制是kafka实现高吞吐的秘密武器,但这个武器用得不好的话也容易出问题,今天主要就来介绍分区的机制以及相关的部分配置。 首先,从 阅读全文
posted @ 2020-03-11 21:07 zzzzMing 阅读(34552) 评论(2) 推荐(9) 编辑
摘要: 上一篇讲述了什么是分布式一致性问题,以及它难在哪里,liveness和satefy问题,和FLP impossibility定理。有兴趣的童鞋可以看看 "分布式系统一致性问题与Raft算法(上)" 。 这一节主要介绍raft算法是如何解决分布式系统中一致性问题的。说起raft大家可能比较陌生,但zo 阅读全文
posted @ 2020-03-04 20:24 zzzzMing 阅读(1086) 评论(0) 推荐(0) 编辑
摘要: 分布式系统一致性难吗?很难,难的哪里?最后又该如何解决。 阅读全文
posted @ 2020-02-28 19:37 zzzzMing 阅读(2241) 评论(0) 推荐(1) 编辑
摘要: 前情提要 Scala函数式编程指南(一) 函数式思想介绍 scala函数式编程(二) scala基础语法介绍 Scala函数式编程(三) scala集合和函数 Scala函数式编程(四)函数式的数据结构 上 Scala函数式编程(四)函数式的数据结构 下 1.面向对象的错误处理 在介绍scala的函 阅读全文
posted @ 2020-02-20 21:01 zzzzMing 阅读(999) 评论(0) 推荐(0) 编辑
摘要: 前情提要 "Scala函数式编程指南(一) 函数式思想介绍" "scala函数式编程(二) scala基础语法介绍" "Scala函数式编程(三) scala集合和函数" "Scala函数式编程(四)函数式的数据结构 上" 1.List代码解析 今天介绍的内容,主要是对上一篇介绍的scala函数式数 阅读全文
posted @ 2019-12-19 18:03 zzzzMing 阅读(888) 评论(0) 推荐(2) 编辑
摘要: 函数式编程的数据结构是什么样的呢?和我们最早接触到的数据结构有什么区别呢? 阅读全文
posted @ 2019-12-04 18:03 zzzzMing 阅读(1289) 评论(0) 推荐(0) 编辑
摘要: 相比于逻辑回归,在很多情况下,SVM算法能够对数据计算从而产生更好的精度。而传统的SVM只能适用于二分类操作,不过却可以通过核技巧(核函数),使得SVM可以应用于多分类的任务中。 本篇文章只是介绍SVM的原理以及核技巧究竟是怎么一回事,最后会介绍sklearn svm各个参数作用和一个demo实战的 阅读全文
posted @ 2019-11-27 20:09 zzzzMing 阅读(6133) 评论(0) 推荐(0) 编辑
摘要: 前情提要: "通俗地说逻辑回归【Logistic regression】算法(一) 逻辑回归模型原理介绍" 上一篇主要介绍了逻辑回归中,相对理论化的知识,这次主要是对上篇做一点点补充,以及介绍sklearn 逻辑回归模型的参数,以及具体的实战代码。 1.逻辑回归的二分类和多分类 上次介绍的逻辑回归的 阅读全文
posted @ 2019-11-13 18:26 zzzzMing 阅读(4954) 评论(0) 推荐(0) 编辑
摘要: 在说逻辑回归前,还是得提一提他的兄弟,线性回归。在某些地方,逻辑回归算法和线性回归算法是类似的。但它和线性回归最大的不同在于,逻辑回归是作用是分类的。 阅读全文
posted @ 2019-11-06 18:06 zzzzMing 阅读(6164) 评论(0) 推荐(2) 编辑
上一页 1 2 3 4 5 6 7 ··· 9 下一页