摘要:
Spark快速入门 Spark 1.6.0 转载请注明出处: "http://www.cnblogs.com/BYRans/" 快速入门(Quick Start) 本文简单介绍了Spark的使用方式。首先介绍Spark的交互界面的API使用,然后介绍如何使用Java、Scala以及Python编写S 阅读全文
2016年2月19日
2016年1月26日
摘要:
vim快捷键不废话,看图。<a style="text decoration: none" title="vim键盘图大图" href="http://images.cnblogs.com/cnblogs_com/BYRans/761498/o_vim.png" target="_blank" 点... 阅读全文
2016年1月13日
摘要:
Hadoop HDFS负载均衡 转载请注明出处: "http://www.cnblogs.com/BYRans/" <br/ Hadoop HDFSHadoop 分布式文件系统(Hadoop Distributed File System),简称 HDFS,被设计成适合运行在通用硬件上的分布式... 阅读全文
2016年1月11日
摘要:
YARN DistributedShell源码分析与修改 转载请注明出处: "http://www.cnblogs.com/BYRans/" <br/ "1 概述" "2 YARN DistributedShell不能满足当前需求" "2.1 功能需求" "2.2 YARN Distr... 阅读全文
2015年12月18日
摘要:
Spark SQL 官方文档 中文翻译 转载请注明出处: "http://www.cnblogs.com/BYRans/" <br/ "1 概述(Overview)" "2 DataFrames" "2.1 入口:SQLContext(Starting Point: SQLContext... 阅读全文
2015年12月16日
摘要:
Spark SQL 之 Migration Guide "支持的Hive功能" 转载请注明出处: "http://www.cnblogs.com/BYRans/" <br/ Migration Guide 与Hive的兼容(Compatibility with Apache Hive)Spa... 阅读全文
2015年12月14日
摘要:
Spark SQL 之 Performance Tuning & Distributed SQL Engine 转载请注明出处: "http://www.cnblogs.com/BYRans/" <br/ 缓存数据至内存(Caching Data In Memory)Spark SQL可以通过... 阅读全文
2015年11月29日
摘要:
Spark SQL 之 Data Sources 转载请注明出处: "http://www.cnblogs.com/BYRans/" <br/ 数据源(Data Source)Spark SQL的DataFrame接口支持多种数据源的操作。一个DataFrame可以进行RDDs方式的操作,也可... 阅读全文
2015年11月28日
摘要:
Spark SQL 之 DataFrame 转载请注明出处: "http://www.cnblogs.com/BYRans/" <br/ 概述(Overview)Spark SQL是Spark的一个组件,用于结构化数据的计算。Spark SQL提供了一个称为DataFrames的编程抽象,Da... 阅读全文
2015年11月23日
摘要:
概述
Dom解析的文章已经烂大街了。在这里,只举三个场景下如何编码的例子: xml内有多个同名节点,获取这多个同名节点 已获取到某个节点,生成这个节点的xml描述 修改节点某属性的值 详细的讲解看官请自行百度。
dom4j包下载链接为: "点击下载dom4j" 获取多个同... 阅读全文
2015年10月23日
摘要:
转载请注明出处:http://www.cnblogs.com/BYRans/多分类问题 在一个多分类问题中,因变量y有k个取值,即。例如在邮件分类问题中,我们要把邮件分为垃圾邮件、个人邮件、工作邮件3类,目标值y是一个有3个取值的离散值。这是一个多分类问题,二分类模型在这里不太适用。 多分类问题符... 阅读全文
2015年9月9日
摘要:
本博文内容参考相关博客以及《Java编程思想》整理而成,如有侵权,请联系博主。转载请注明出处:http://www.cnblogs.com/BYRans/PDF版下载链接:《Java基础知识总结》。如果您想在此基础上做一些修改,请联系dingyu.sdu@gmail.com,我把word原版发给您。... 阅读全文
2015年8月17日
摘要:
转载请注明出自BYRans博客:http://www.cnblogs.com/BYRans/ 前面的文章已经介绍了一个回归和一个分类的例子。在逻辑回归模型中我们假设: 在分类问题中我们假设: 他们都是广义线性模型中的一个例子,在理解广义线性模型之前需要先理解指数分布族。指数分布族(The... 阅读全文
2015年8月11日
摘要:
转载请注明出自BYRans博客:http://www.cnblogs.com/BYRans/ 在讲义《线性回归、梯度下降》和《逻辑回归》中我们提到可以用梯度下降或梯度上升的方式求解θ。在本文中将讲解另一种求解θ的方法:牛顿方法(Newton's method)。牛顿方法(Newton's metho... 阅读全文
2015年8月8日
摘要:
转载请注明出自BYRans博客:http://www.cnblogs.com/BYRans/ 本文主要讲解分类问题中的逻辑回归。逻辑回归是一个二分类问题。二分类问题 二分类问题是指预测的y值只有两个取值(0或1),二分类问题可以扩展到多分类问题。例如:我们要做一个垃圾邮件过滤系统,是邮件的特征,预测... 阅读全文