随笔分类 -  Spark

摘要:转自:http://www.cnblogs.com/xiaozhi_5638/p/4762846.html 目录 一个问题 函数式编程中的函数 数学与函数式编程 混合式编程风格 一个问题 假设现在我们需要开发一个绘制数学函数平面图像(一元)的工具库,可以提供绘制各种函数图形的功能,比如直线f(x)= 阅读全文
posted @ 2016-04-20 20:06 五三中 阅读(576) 评论(0) 推荐(0) 编辑
摘要:转自:http://www.ruanyifeng.com/blog/2012/04/functional_programming.html 诞生50多年之后,函数式编程(functional programming)开始获得越来越多的关注。 不仅最古老的函数式语言Lisp重获青春,而且新的函数式语言 阅读全文
posted @ 2016-03-18 18:37 五三中 阅读(205) 评论(0) 推荐(0) 编辑
摘要:转自:http://www.cnblogs.com/colorfulkoala/p/4333103.html?utm_source=tuicool&utm_medium=referral 视频地址:http://v.youku.com/v_show/id_XOTMzNDc2Nzg0.html 上古十 阅读全文
posted @ 2016-03-09 18:46 五三中 阅读(958) 评论(0) 推荐(0) 编辑
摘要:转自:http://www.iteblog.com/archives/1183Spark目前被越来越多的企业使用,和Hadoop一样,Spark也是以作业的形式向集群提交任务,那么在内部实现Spark和Hadoop作业模型都一样吗?答案是不对的。 熟悉Hadoop的人应该都知道,用户先编写好一个程... 阅读全文
posted @ 2016-01-21 12:55 五三中 阅读(1398) 评论(0) 推荐(0) 编辑
摘要:转自:http://www.cnblogs.com/RuiLei/archive/2008/11/09/1329905.html最近学习spark,scala,感觉lambda,委托,匿名方法等对于scala的学习很有帮助,很多东西都感觉能融合,但好久没写lambda表达式了,生疏。1、查询Stud... 阅读全文
posted @ 2016-01-20 01:16 五三中 阅读(258) 评论(0) 推荐(0) 编辑
摘要:转自: http://www.csdn.net/article/2015-06-21/2825011 摘要:眼下大数据领域最热门的词汇之一便是流计算了,而其中最耀眼的无疑是来自Spark社区的SparkStreaming项目。 对于流计算而言,最核心的特点毫无疑问就是它对低时的需求,但这也带来了相关 阅读全文
posted @ 2016-01-19 15:01 五三中 阅读(1732) 评论(0) 推荐(0) 编辑
摘要:转自:http://blog.csdn.net/colorant/article/details/8255958==是什么==目标Scope(解决什么问题)在大规模的特定数据集上的迭代运算或重复查询检索官方定义aMapReduce-like cluster computing framework d... 阅读全文
posted @ 2016-01-19 00:40 五三中 阅读(772) 评论(0) 推荐(0) 编辑
摘要:科普Spark,Spark是什么,如何使用Spark(1)转自:http://www.aboutyun.com/thread-6849-1-1.html阅读本文章可以带着下面问题:1.Spark基于什么算法的分布式计算(很简单)2.Spark与MapReduce不同在什么地方3.Spark为什么比H... 阅读全文
posted @ 2016-01-18 11:48 五三中 阅读(2174) 评论(0) 推荐(0) 编辑
摘要:转自:http://www.dataguru.cn/thread-341168-1-1.html 流式实时分布式计算系统在互联网公司占有举足轻重的地位,尤其在在线和近线的海量数据处理上。而处理这些海量数据的,就是实时流式计算系统。Spark是实时计算的系统,支持流式计算,批处理和实时查询。除了... 阅读全文
posted @ 2016-01-16 22:53 五三中 阅读(3541) 评论(0) 推荐(0) 编辑
摘要:转自:http://www.csdn.net/article/2014-01-28/2818282-Spark-Streaming-big-data提到Spark Streaming,我们不得不说一下BDAS(Berkeley Data Analytics Stack),这个伯克利大学提出的关于数据... 阅读全文
posted @ 2015-12-13 17:39 五三中 阅读(577) 评论(0) 推荐(0) 编辑
摘要:转自:http://www.aboutyun.com/thread-8421-1-1.html问题导读1.什么是spark?2.spark编程模型是什么?3.spark运维需要具有什么知识?4.spark如何监控?5.如何搭建开发spark?2014-05-30 Spark1.0.0 Relaeas... 阅读全文
posted @ 2015-11-25 15:00 五三中 阅读(241) 评论(0) 推荐(0) 编辑
摘要:转自:http://www.cnblogs.com/hseagle/p/3664933.html楔子源码阅读是一件非常容易的事,也是一件非常难的事。容易的是代码就在那里,一打开就可以看到。难的是要通过代码明白作者当初为什么要这样设计,设计之初要解决的主要问题是什么。在对Spark的源码进行具体的走读... 阅读全文
posted @ 2015-11-25 09:45 五三中 阅读(400) 评论(0) 推荐(0) 编辑
摘要:转自:http://www.cnblogs.com/shishanyuan/p/4699644.html这一两年Spark技术很火,自己也凑热闹,反复的试验、研究,有痛苦万分也有欣喜若狂,抽空把这些整理成文章共享给大家。这个系列基本上围绕了Spark生态圈进行介绍,从Spark的简介、编译、部署,再... 阅读全文
posted @ 2015-11-24 23:33 五三中 阅读(239) 评论(0) 推荐(0) 编辑

点击右上角即可分享
微信分享提示