摘要: 先附一个 "官网地址" Capacity Scheduler是YARN中默认的资源调度器。 1. 相关参数配置: 1. 资源分配相关参数 2. 限制应用程序数目相关参数 3. 队列访问和权限控制参数 2. 实例: 阅读全文
posted @ 2016-08-10 17:40 扳掘de 阅读(361) 评论(0) 推荐(0) 编辑
摘要: 一、执行第一个Spark程序 1、执行程序 我们执行一下Spark自带的一个例子,利用蒙特·卡罗算法求PI: 启动Spark集群后,可以在集群的任何一台机器上执行一下命令: /home/spark/spark-1.6.1-bin-hadoop2.6/bin/spark-submit \ --clas 阅读全文
posted @ 2016-05-26 19:22 扳掘de 阅读(202) 评论(0) 推荐(0) 编辑
摘要: 一、概述 关于Spark是什么、为什么学习Spark等等,在这就不说了,直接看这个:http://spark.apache.org, 我就直接说一下Spark的一些优势: 1、快 与Hadoop的MapReduce相比,Spark基于内存的运算要快100倍以上,基于硬盘的运算也要快10倍以上。Spa 阅读全文
posted @ 2016-05-26 12:35 扳掘de 阅读(287) 评论(0) 推荐(0) 编辑
摘要: 一、Nio服务端程序启动和运行的详细过程: 1、打开一个serverSocketChannel(相当于ServerSocket),并绑定监听地址,设置连接为非阻塞 servChannel = ServerSocketChannel.open();//建立通道 servChannel.socket() 阅读全文
posted @ 2016-04-10 16:43 扳掘de 阅读(149) 评论(0) 推荐(0) 编辑
摘要: Linux对计算机各组件/装置的分辨,是和Windows系统完全不一样的!因为各个组件/设备在Linux上都是一个文件!因此,我们在认识各项设备时一定要学习Linux的设备文件名。 众所周知,Linux下几乎所有设备的文件均放置/dev目录下,先举一个例子,IDE接口的硬盘的文件名即为/dev... 阅读全文
posted @ 2016-01-08 13:12 扳掘de 阅读(345) 评论(0) 推荐(0) 编辑
摘要: 1、当判断两个基本类型变量时,且两个变量均为数值时,只要数值相等,“==”和 equals 方法都会返回 true; 2、当判断两个对象变量时,只有两个对象变量同时指向同一个对象,“==”和 equals 方法才会返回 true; 3、当判断两个字符串变量时,由于 String 类重写了 equals 方法,当两个字符串包含的字符序列相同,则返回 true。 阅读全文
posted @ 2013-02-16 12:42 扳掘de 阅读(118) 评论(0) 推荐(0) 编辑
摘要: 在平常学习中我们经常会碰到代码块和构造器的问题,下面我用一个简单的例子来解释它的运行机制。 我们先建立三个类,它们的关系是 Animal (Brid的父类) | Brid (Eagle的父类) | Eagle 代码如下: ① public class Animal { ... 阅读全文
posted @ 2012-12-08 00:26 扳掘de 阅读(980) 评论(0) 推荐(0) 编辑
摘要: fedora17下安装锐捷客户端经过这几天的忙碌,昨天晚上终于搞定了锐捷,今天中午回来就开始写了。1,首先需要下载锐捷客户端 http://code.google.com/p/mentohust/,记住一 定要下载rpm文件(rpm是fedora中的软件包格式),2,安装(1)打开直接安装,当然它不像在windows上那样蹦出来一个窗口和我们交互,右键-->属性-->权限-->允许以程序执行文件,这样就能直接安装了;(2)在终端上安装:rpm-i your-package.rpm,卸载:rpm-e your-package 记住这里不能有rpm后缀啊。有些同学会问怎么没有锐捷 阅读全文
posted @ 2012-11-29 20:44 扳掘de 阅读(785) 评论(0) 推荐(0) 编辑
摘要: Win7下硬盘安装fedora17这几天经过很多次的百度和实验,终于成功的在我的x64机子上装上了fedora17,以此分享给大家,希望能给大家帮助。一、准备工作:1、工具,因为我们电脑上大部分的启动管理器只能支持windows系列的系统,并不能支持Linux或者Macios,所以我们这里要用到一个启动管理器EasyBCD,也可以用功能更强大的国产软件BOOTICE,我实验过了,但没用它,如果谁有兴趣可以试试一下fedora17http://download.chinaunix.net/download/0014000/13340.shtml(要选择适合自己的)EasyBCD这个自己网上下吧, 阅读全文
posted @ 2012-11-28 13:47 扳掘de 阅读(5279) 评论(2) 推荐(0) 编辑