08 2015 档案

Spark - RDD（弹性分布式数据集）

摘要：org.apache.spark.rddRDDabstract class RDD[T] extends Serializable with LoggingA Resilient Distributed Dataset (RDD), the basic abstraction in Spark. R... 阅读全文

posted @ 2015-08-31 11:44 澄轶阅读(674) 评论(0) 推荐(0) 编辑

Brief introduction to Scala and Breeze for statistical computing

摘要：Brief introduction to Scala and Breeze for statistical computing时间2013-12-31 03:17:19Darren Wilkinson's research blog原文http://darrenjw.wordpress.com/2... 阅读全文

posted @ 2015-08-30 22:01 澄轶阅读(514) 评论(0) 推荐(0) 编辑

Scala - Spark Lambda“goesto“ => 分析

摘要：1 /// 定义一个函数AddNoise，参数分别为rdd,Fraction。其中rdd为（BreezeDenseMatrix， BreezeDenseMatrix）元组构成的RDD。Fraction为一个Double。返回一个（BreezeDenseMatrix， BreezeDenseMa... 阅读全文

posted @ 2015-08-30 21:43 澄轶阅读(364) 评论(0) 推荐(0) 编辑

SparkContext.setCheckpointDir()

摘要：classSparkContextextendsLoggingwithExecutorAllocationClientMain entry point for Spark functionality.spark功能函数的主入口。defparallelize[T](seq:Seq[T],numSlic... 阅读全文

posted @ 2015-08-29 20:53 澄轶阅读(3661) 评论(0) 推荐(0) 编辑

Scala：使用Sublime开发Scala

摘要：Scala：使用Sublime开发Scala 第一步：【Tools】【Build System】【New Build System】第二步：在打开的新文件中输入： { //"cmd": ["scalac", "-d", "classes", "$file", "&", "scala", "-cp" 阅读全文

posted @ 2015-08-25 09:18 澄轶阅读(783) 评论(0) 推荐(0) 编辑

tar

摘要：tar-c: 建立压缩档案-x：解压-t：查看内容-r：向压缩归档文件末尾追加文件-u：更新原压缩包中的文件这五个是独立的命令，压缩解压都要用到其中一个，可以和别的命令连用但只能用其中一个。下面的参数是根据需要在压缩或解压档案时可选的。-z：有gzip属性的-j：有bz2属性的-Z：有compres... 阅读全文

posted @ 2015-08-19 20:36 澄轶阅读(224) 评论(0) 推荐(0) 编辑

Spark RDD Operations（1）

摘要：以上是对应的RDD的各中操作，相对于MaoReduce只有map、reduce两种操作，Spark针对RDD的操作则比较多 *********************************************** map(func) 返回一个新的分布式数据集，由每个原元素经过func函数转换后阅读全文

posted @ 2015-08-12 16:31 澄轶阅读(642) 评论(0) 推荐(0) 编辑

三星S4接电话黑屏无法挂断通话

摘要：最近发现S4的通话距离感应起出了问题，接电话后直接熄屏，按什么按钮都没有反应。通话结束后只能等对方挂断才会恢复正常，再或者长按9秒电源键强制重启。极大的影响了实用体验。网上搜了下，发现这样的问题还不少。都是什么拆机清洁距离感应器了，送修等解决办法，耗时耗力还费钱。于是请教了两位大神，一位在做手机的预... 阅读全文

posted @ 2015-08-11 23:24 澄轶阅读(586) 评论(0) 推荐(0) 编辑