一天不进步，就是退步

2018年10月5日

摘要： http://www.infoq.com/cn/articles/58-big-data-platform-technology 主要内容分为三方面：58大数据平台目前的整体架构是怎么样的；最近一年半的时间内我们面临的问题、挑战以及技术演进过程；以及未来的规划。首先看一下58大数据平台架构。大的方阅读全文

posted @ 2018-10-05 23:04 一天不进步，就是退步阅读(656) 评论(0) 推荐(1) 编辑

2018年9月30日

企业大数据平台仓库架构建设思路

摘要： https://yq.aliyun.com/articles/57901 总体思路随着互联网规模不断的扩大，数据也在爆炸式地增长，各种结构化、半结构化、非结构化数据不断地产生。新环境下的数据应用呈现业务变化快、数据来源多、系统耦合多、应用深度深等特征。那么基于这些特征，该如何构建数据仓库呢？我认为阅读全文

posted @ 2018-09-30 17:54 一天不进步，就是退步阅读(535) 评论(0) 推荐(0) 编辑

华数大数据平台解决方案

摘要： http://www.soft78.com/article/2016-03/8a2389fd5310d3e40153300fbe9901c0.html 第1章华数大数据分析平台方案介绍 1.1 华数大数据平台总体架构 1.1.1 华数大数据平台应用架构应用架构图基于华数多年来的开发经验，并借鉴阅读全文

posted @ 2018-09-30 17:47 一天不进步，就是退步阅读(643) 评论(0) 推荐(0) 编辑

数据仓库系列篇——唯品会大数据架构

摘要： https://zhuanlan.zhihu.com/p/45123018 What——大数据&数据仓库什么是大数据? * 广义的大数据是指：无法用现有的软件工具提取、存储、搜索、共享、分析和处理的、海量的、复杂的数据集合。业界通常用4个V（即Volume、Variety、Value、Veloci 阅读全文

posted @ 2018-09-30 17:33 一天不进步，就是退步阅读(953) 评论(0) 推荐(0) 编辑

农发行：BI数据平台建设

摘要： http://www.esensoft.com/cases/banking/542.html 现状及问题中国农业发展银行是直属国务院领导的我国唯一的一家农业政策性银行，主要职责是按照国家的法律、法规和方针、政策，承担国家规定的农业政策性金融业务，为农业和农村经济发展服务。（一）数据及应用现状随阅读全文

posted @ 2018-09-30 17:29 一天不进步，就是退步阅读(323) 评论(0) 推荐(0) 编辑

我所经历的大数据平台发展史

摘要： http://www.raincent.com/content-85-5840-1.html 非互联网时代我是从2000年开始接触数据仓库，大约08年开始进入互联网行业，那时在互联网接触到数据平台与传统第三代数据架构还是有很大的类似之处，随着互联网的突飞猛进，每一次的技术变革都带来一场从技术、架构阅读全文

posted @ 2018-09-30 17:11 一天不进步，就是退步阅读(785) 评论(0) 推荐(0) 编辑

斗鱼大数据的玩法

摘要： https://blog.csdn.net/luxianping/article/details/71159453 我是吴瑞诚，现在负责斗鱼数据平台部，今天给大家分享一下斗鱼大数据这块的玩法。我先做个自我介绍，我是 11 年初华科通信硕士毕业就进入淘宝，主要做 HBase 相关开发，后来回武汉后在阅读全文

posted @ 2018-09-30 16:06 一天不进步，就是退步阅读(711) 评论(0) 推荐(0) 编辑

基于SQL on Hadoop的数据仓库技术

摘要： http://www.uspeed.com.cn/958.html 数据仓库是企业统一的数据管理的方式，将不同的应用中的数据汇聚，然后对这些数据加工和多维度分析，并最终展现给用户。它帮助企业将纷繁浩杂的数据整合加工，并最终转换为关键流程上的KPI，从而为决策/管理等提供最准确的支持，并帮助预测发展趋阅读全文

posted @ 2018-09-30 15:57 一天不进步，就是退步阅读(862) 评论(0) 推荐(0) 编辑

为什么一些机器学习模型需要对数据进行归一化？

摘要： http://www.cnblogs.com/LBSer/p/4440590.html 机器学习模型被互联网行业广泛应用，如排序（参见：排序学习实践）、推荐、反作弊、定位（参见：基于朴素贝叶斯的定位算法）等。一般做机器学习应用的时候大部分时间是花费在特征处理上，其中很关键的一步就是对特征数据进行归一阅读全文

posted @ 2018-09-30 15:18 一天不进步，就是退步阅读(1851) 评论(0) 推荐(0) 编辑

<机器学习实战>读书笔记--k邻近算法KNN

摘要： k邻近算法的伪代码：对未知类别属性的数据集中的每个点一次执行以下操作： (1)计算已知类别数据集中的点与当前点之间的距离； (2)按照距离递增次序排列 (3)选取与当前点距离最小的k个点 (4)确定前k个点所在类别的出现频率 (5)返回前k个点出现频率最好的类别作为当前点的预测分类 python函阅读全文

posted @ 2018-09-30 15:08 一天不进步，就是退步阅读(191) 评论(0) 推荐(0) 编辑