上一页 1 ··· 105 106 107 108 109 110 111 112 113 ··· 119 下一页
摘要: 本文由 网易云 发布。 概述 出于对可扩展性和性能的考虑,UDF已变成大数据生态圈查询引擎的必备功能之一,无论是Calcite、Hive、Impala都对其进行支持,但是UDF的支持有利也有弊,好处在于它提供了对某些用户独有需求的支持,例如某些产品需要将表中的某字段使用自定义的方式解析成可读字段,例 阅读全文
posted @ 2018-05-09 16:23 网易数帆 阅读(2336) 评论(0) 推荐(0) 编辑
摘要: 本文由 网易云 发布。 Kudu是Cloudera开源的新型列式存储系统,是Apache Hadoop生态圈的新成员之一(incuba ng),专门为了对快速变化的数据进行快速的分析,填补了以往Hadoop存储层的空缺。本文主要对Kudu的动机、背景,以及架构进行简单介绍。 背景——功能上的空白 H 阅读全文
posted @ 2018-05-09 16:16 网易数帆 阅读(772) 评论(0) 推荐(1) 编辑
摘要: 本文由 网易云 发布。 1 概述 本文主要介绍kudu底层存储引擎的数据组织方式,先看整体结构如下: 一张表会分成若干个tablet , 每个tablet 包括MetaData 元信息及若干个RowSet , RowSet 包含一个MemRowSet 及若干个DiskRowSet , DiskRow 阅读全文
posted @ 2018-05-09 16:05 网易数帆 阅读(1176) 评论(0) 推荐(0) 编辑
摘要: 本文由 网易云 发布。 背景 Cloudera在2016年发布了新型的分布式存储系统——kudu,kudu目前也是apache下面的开源项目。Hadoop生态圈中的技术繁多,HDFS作为底层数据存储的地位一直很牢固。而HBase作为Google BigTable的开源产品,一直也是Hadoop生态圈 阅读全文
posted @ 2018-05-09 16:01 网易数帆 阅读(5325) 评论(0) 推荐(0) 编辑
摘要: 本文由 网易云 发布。 作者:范欣欣(本篇文章仅限内部分享,如需转载,请联系网易获取授权。) 本文由 网易云 发布。 作者:范欣欣(本篇文章仅限内部分享,如需转载,请联系网易获取授权。) Region自动切分是HBase能够拥有良好扩张性的最重要因素之一,也必然是所有分布式系统追求无限扩展性的一副良 阅读全文
posted @ 2018-05-09 15:54 网易数帆 阅读(4719) 评论(0) 推荐(1) 编辑
摘要: 本文由 网易云 发布。 易盾业务风控周报每周呈报值得关注的安全技术和事件,包括但不限于内容安全、移动安全、业务安全和网络安全,帮助企业提高警惕,规避这些似小实大、影响业务健康发展的安全风险。 1.文化部再次审查直播和游戏产品,已下架4939款直播应用 4月17日,国家文化和旅游局发文表示,正在对30 阅读全文
posted @ 2018-05-09 15:39 网易数帆 阅读(137) 评论(0) 推荐(0) 编辑
摘要: 本文由 网易云 发布。 “知物由学”是网易云易盾打造的一个品牌栏目,词语出自汉·王充《论衡·实知》。人,能力有高下之分,学习才知道事物的道理,而后才有智慧,不去求问就不会知道。“知物由学”希望通过一篇篇技术干货、趋势解读、人物思考和沉淀给你带来收获的同时,也希望打开你的眼界,成就不一样的你。当然,如 阅读全文
posted @ 2018-05-09 15:31 网易数帆 阅读(285) 评论(0) 推荐(0) 编辑
摘要: 本文由 网易云 发布。 本文内容接上一篇Apache 流框架 Flink,Spark Streaming,Storm对比分析(一) 2.Spark Streaming架构及特性分析 2.1 基本架构 基于是spark core的spark streaming架构。 Spark Streaming是将 阅读全文
posted @ 2018-05-08 21:09 网易数帆 阅读(6164) 评论(0) 推荐(0) 编辑
摘要: 本文由 网易云 发布。 1.Flink架构及特性分析 Flink是个相当早的项目,开始于2008年,但只在最近才得到注意。Flink是原生的流处理系统,提供high level的API。Flink也提供 API来像Spark一样进行批处理,但两者处理的基础是完全不同的。Flink把批处理当作流处理中 阅读全文
posted @ 2018-05-08 13:48 网易数帆 阅读(14173) 评论(4) 推荐(0) 编辑
摘要: 本文由 网易云 发布。 作者:汪谦 (本篇文章仅限知乎内部分享,如需转载,请取得作者同意授权。) 本文将介绍如何通过有数直观分析销售代表在各类目商品的销售贡献。 先上效果图 通过该图表,我们可以快速了解销售代表的收入贡献,比如当我们选中“薛婷”时,蓝色的柱子表示“薛婷”的销售额,背景的灰色柱子表示公 阅读全文
posted @ 2018-05-08 13:32 网易数帆 阅读(822) 评论(0) 推荐(0) 编辑
上一页 1 ··· 105 106 107 108 109 110 111 112 113 ··· 119 下一页