望穿秋水
管理&技术&业务 项目管理方面:加强通过工具辅助管理,构建Web项目管理系统来协助项目管理。技术开发方面:加强系统分析能力、架构设计能力,时刻把握新技术动态。业务方面:加强需求分析能力,使最终需求来源于客户又高于客户。
摘要: Spark MLlib全部算法总结(2.1.0版) 说明:总结算法为Spark2.1.0中Mllib中源码算法,参照网络链接及书籍整理而成。 算法按计算过程分两大类:监督学习(Supervised Learning)和无监督学习(Unsupervised Learning)。 监督学习:指给定算法的 阅读全文
posted @ 2021-02-03 09:39 望穿秋水 阅读(248) 评论(0) 推荐(0) 编辑
摘要: 之前Mahout或者自己写的MR来解决复杂的机器学习,导致效率低,Spark特别适合迭代式的计算,这正是机器学习算法训练所需要的,MLlib是基于spark之上算法组件,基于spark平台来实现。 主要的机器学习的算法目前在MLlib中都已经提供了,分类回归、聚类、关联规则、推荐、降维、优化、特征抽 阅读全文
posted @ 2021-02-03 09:27 望穿秋水 阅读(277) 评论(0) 推荐(0) 编辑