摘要:
参考资料:http://www.ruanyifeng.com/blog/2011/05/how_to_choose_free_software_licenses.html 阅读全文
摘要:
1 安装 Spark 使用如下命令下载 , "下载地址" : 解压 包: 修改环境变量并声明: 打开配置文件: 添加变量: 2 部署 Standalone Spark 启动 : 检查是否启动成功(使用 客户端): 输出以下表示成功: 2018 12 26 11:20:33 WARN NativeCo 阅读全文
摘要:
本章是 "The evolution of cluster scheduler architectures" 文章的学习笔记。这篇文章讨论了这些年调度架构是如何发展的以及为什么会这样发展。 首先介绍一下这篇文章的作者: "Malte Schwarzkopf" ,他目前在 的 "PDOS实验室" 作博 阅读全文
摘要:
`Google Hadoop JobTracker Omega`)。 2.1 中央式调度(Monolithic schedulers) 在同一个代码模块中实现调度策略,单个实例,没有并行。Hadoop1,MapReduce 的宏调度架构如下图所示。 常见于HPC(high performanceco 阅读全文
摘要:
1.1 什么是调度 通常所说的调度( )是和时间有关的。 1.1.1 单 CPU 的时间片调度 时间作为唯一的不可逆转的资源,一般是划分为多个时间片来使用。就计算机而言,由于 的速度快的多,所以就有了针对 时间片的调度,让多个任务在同一个 上运行起来。某一时刻CPU还是单任务运行的。 1.1.2 多 阅读全文
摘要:
1 云集成 与云基础设施的集成。 1.1 介绍 所有主要的云提供商都在 对象存储 中提供持久的数据存储。这些不是经典的 文件系统。为了在不出现任何故障的情况下存储数百字节的数据,对象存储用一个更简单的 模型替换了传统的文件系统目录树。为了支持远程访问,对象上的操作通常使用(缓慢的) 协议接口。 可以 阅读全文
摘要:
1 环境准备 1.1 CentOS 安装 Openresty Openresty 的下载及安装请参考:http://openresty.org/cn/。 1.2 安装 GraphicsMagick 源码安装,源码下载地址:https://sourceforge.net/projects/graphi 阅读全文
摘要:
1 环境准备 1.1 安装 golang 本文中选择使用 。 注意: 要求 版本 。 获取 的安装包到本地: 解压 包到 目录中: 把 添加到环境变量 。为此你可以将下面这行加入到 或者 中去: 验证是否安装成功: 1.2 安装 Govendor 通过 命令进行安装: 切换到 目录中,编译 ,并 阅读全文
摘要:
1 Raster 简介 一般翻译成 (或 )。 1.1 什么是 Raster 数据? 最简形式的 由按行和列(或格网)组织的像元(或像素)矩阵组成,其中的每个像元都包含一个信息值(例如温度)。 可以是数字航空像片、卫星影像、数字图片或甚至扫描的地图。 以 格式存储的数据可以表示各种实际现象: ( 阅读全文
摘要:
为了能够重用已有的 语言库,我们在使用 开发项目或系统的时候难免会遇到 和 混合编程,这时很多人都会选择使用 。 1 Cgo 话说 这个东西可算得上是让人又爱又恨, 好处在于它可以让你快速重用已有的 库 ,无需再用 重造一遍轮子,而 坏处就在于它会在一定程度上削弱你的系统性能 。关于 的种种 阅读全文