2016年2月19日

摘要: Spark快速入门 Spark 1.6.0 转载请注明出处: "http://www.cnblogs.com/BYRans/" 快速入门(Quick Start) 本文简单介绍了Spark的使用方式。首先介绍Spark的交互界面的API使用,然后介绍如何使用Java、Scala以及Python编写S 阅读全文
posted @ 2016-02-19 09:24 BYRans 阅读(3327) 评论(0) 推荐(4) 编辑

2016年1月26日

摘要: vim快捷键不废话,看图。<a style="text decoration: none" title="vim键盘图大图" href="http://images.cnblogs.com/cnblogs_com/BYRans/761498/o_vim.png" target="_blank" 点... 阅读全文
posted @ 2016-01-26 16:26 BYRans 阅读(601) 评论(2) 推荐(3) 编辑

2016年1月13日

摘要: Hadoop HDFS负载均衡 转载请注明出处: "http://www.cnblogs.com/BYRans/" <br/ Hadoop HDFSHadoop 分布式文件系统(Hadoop Distributed File System),简称 HDFS,被设计成适合运行在通用硬件上的分布式... 阅读全文
posted @ 2016-01-13 18:43 BYRans 阅读(16921) 评论(0) 推荐(6) 编辑

2016年1月11日

摘要: YARN DistributedShell源码分析与修改 转载请注明出处: "http://www.cnblogs.com/BYRans/" <br/ "1 概述" "2 YARN DistributedShell不能满足当前需求" "2.1 功能需求" "2.2 YARN Distr... 阅读全文
posted @ 2016-01-11 09:26 BYRans 阅读(3224) 评论(9) 推荐(2) 编辑

2015年12月18日

摘要: Spark SQL 官方文档 中文翻译 转载请注明出处: "http://www.cnblogs.com/BYRans/" <br/ "1 概述(Overview)" "2 DataFrames" "2.1 入口:SQLContext(Starting Point: SQLContext... 阅读全文
posted @ 2015-12-18 14:59 BYRans 阅读(29375) 评论(7) 推荐(6) 编辑

2015年12月16日

摘要: Spark SQL 之 Migration Guide "支持的Hive功能" 转载请注明出处: "http://www.cnblogs.com/BYRans/" <br/ Migration Guide 与Hive的兼容(Compatibility with Apache Hive)Spa... 阅读全文
posted @ 2015-12-16 14:18 BYRans 阅读(1430) 评论(2) 推荐(3) 编辑

2015年12月14日

摘要: Spark SQL 之 Performance Tuning & Distributed SQL Engine 转载请注明出处: "http://www.cnblogs.com/BYRans/" <br/ 缓存数据至内存(Caching Data In Memory)Spark SQL可以通过... 阅读全文
posted @ 2015-12-14 18:41 BYRans 阅读(1676) 评论(0) 推荐(1) 编辑

2015年11月29日

摘要: Spark SQL 之 Data Sources 转载请注明出处: "http://www.cnblogs.com/BYRans/" <br/ 数据源(Data Source)Spark SQL的DataFrame接口支持多种数据源的操作。一个DataFrame可以进行RDDs方式的操作,也可... 阅读全文
posted @ 2015-11-29 20:20 BYRans 阅读(7870) 评论(0) 推荐(2) 编辑

2015年11月28日

摘要: Spark SQL 之 DataFrame 转载请注明出处: "http://www.cnblogs.com/BYRans/" <br/ 概述(Overview)Spark SQL是Spark的一个组件,用于结构化数据的计算。Spark SQL提供了一个称为DataFrames的编程抽象,Da... 阅读全文
posted @ 2015-11-28 17:28 BYRans 阅读(11051) 评论(0) 推荐(0) 编辑

2015年11月23日

摘要: 概述 Dom解析的文章已经烂大街了。在这里,只举三个场景下如何编码的例子: xml内有多个同名节点,获取这多个同名节点 已获取到某个节点,生成这个节点的xml描述 修改节点某属性的值 详细的讲解看官请自行百度。 dom4j包下载链接为: "点击下载dom4j" 获取多个同... 阅读全文
posted @ 2015-11-23 20:27 BYRans 阅读(4122) 评论(0) 推荐(0) 编辑

2015年10月23日

摘要: 转载请注明出处:http://www.cnblogs.com/BYRans/多分类问题 在一个多分类问题中,因变量y有k个取值,即。例如在邮件分类问题中,我们要把邮件分为垃圾邮件、个人邮件、工作邮件3类,目标值y是一个有3个取值的离散值。这是一个多分类问题,二分类模型在这里不太适用。 多分类问题符... 阅读全文
posted @ 2015-10-23 18:54 BYRans 阅读(18361) 评论(0) 推荐(2) 编辑

2015年9月9日

摘要: 本博文内容参考相关博客以及《Java编程思想》整理而成,如有侵权,请联系博主。转载请注明出处:http://www.cnblogs.com/BYRans/PDF版下载链接:《Java基础知识总结》。如果您想在此基础上做一些修改,请联系dingyu.sdu@gmail.com,我把word原版发给您。... 阅读全文
posted @ 2015-09-09 12:46 BYRans 阅读(77192) 评论(14) 推荐(30) 编辑

2015年8月17日

摘要: 转载请注明出自BYRans博客:http://www.cnblogs.com/BYRans/ 前面的文章已经介绍了一个回归和一个分类的例子。在逻辑回归模型中我们假设: 在分类问题中我们假设: 他们都是广义线性模型中的一个例子,在理解广义线性模型之前需要先理解指数分布族。指数分布族(The... 阅读全文
posted @ 2015-08-17 01:24 BYRans 阅读(16829) 评论(0) 推荐(0) 编辑

2015年8月11日

摘要: 转载请注明出自BYRans博客:http://www.cnblogs.com/BYRans/ 在讲义《线性回归、梯度下降》和《逻辑回归》中我们提到可以用梯度下降或梯度上升的方式求解θ。在本文中将讲解另一种求解θ的方法:牛顿方法(Newton's method)。牛顿方法(Newton's metho... 阅读全文
posted @ 2015-08-11 11:11 BYRans 阅读(6087) 评论(0) 推荐(3) 编辑

2015年8月8日

摘要: 转载请注明出自BYRans博客:http://www.cnblogs.com/BYRans/ 本文主要讲解分类问题中的逻辑回归。逻辑回归是一个二分类问题。二分类问题 二分类问题是指预测的y值只有两个取值(0或1),二分类问题可以扩展到多分类问题。例如:我们要做一个垃圾邮件过滤系统,是邮件的特征,预测... 阅读全文
posted @ 2015-08-08 18:06 BYRans 阅读(57893) 评论(3) 推荐(7) 编辑

导航