摘要:
暑假做的一个项目,做着做着就脱离文档了。现在要重新整理架构。tring当中。应该可以用李海宽教授的方法。 阅读全文
摘要:
http://tieba.baidu.com/f?kz=912794172 阅读全文
摘要:
上一篇日志 中提到Master中维护了元数据(即,描述数据的数据)。那么元数据包括哪些呢?① Name Space,即文件系统的目录结构② Chunk 与 文件名的映射 (因为一个文件会被划分成多个Chunk*,因此需要一个映射来告诉系统,这个文件对应哪几个chunk)③ Chunk副本的位置信息 (一个chunk会存储三个副本*)① 和 ② 的容错是通过“操作日志”来完成的。也就说存在operation log里。当系统发生故障时,通过分析log就可以知道当时存了哪些文件,这些文件又被分成了哪些个chunks③是存储在Chunk Server上的,当发生故障时,进行磁盘恢复即可。* 三个副本 阅读全文
摘要:
刘鹏《云计算(第二版)》①~⑤是控制流,⑥是数据流Client: 应用程序的访问接口Master(主服务器):管理节点,在逻辑上只有一个,保存系统的元数据(Metadata,描述数据的数据),负责整个文件系统的管理。Chunk Server(数据库服务器):负责具体的存储工作。数据以文件的形式存储在Chunk Server上。架构设计成这样的好处是:1、Client和Master之间只有控制流(①~⑤),没有数据流,因此降低了Master的负载 (因为控制流只需传送指令和状态,数据量小)2、Client与Chunk Server之间直接传输数据流,同时由于文件被分成多个chunk进行分布式存储 阅读全文
摘要:
from wikipedia1、GIS地理资讯系统(GIS,Geographic Information System)是一门综合性学科,结合地理学与地图学,已经广泛的应用在不同的领域,是用于输入、存储、查询、分析和显示地理数据的计算机系统。GIS属于信息系统的一类,不同在于它能运作和处理地理参照数据。地理参照数据描述地球表面(包括大气层和较浅的地表下空间)空间要素的位置和属性,在GIS中的两种地理数据成分:空间数据,与空间要素几何特性有关;属性数据,提供空间要素的信息。地理资讯系统与全球定位系统(GPS)、遥感系统(RS)合称3S系统。一个地理资讯系统(GIS) 是一种具有信息系统空间专业形 阅读全文
摘要:
《云革命》-(美) 查尔斯·巴布科克1、Urs Holzle 和Luiz Barroso的文章2、谷歌在设计其搜索引擎的运行时,预计到了集群里的一个或多个单点会出现故障。谷歌没有将容错性建在硬件中,而是把容错责任上移至管理集群的软件上。软件会绕过故障元件把故障元件未完成的工作交给云中的完好元件去完成,这样,云数据中心就具有容错功能,或者说,能够应对任何单元件的故障了。3、如果能将故障管理常规化,云数据中心就能持续不断的运行。这是一个核心原则。[该原则由论文《The Data Center as a Computer: An Introduction to the Design of 阅读全文
摘要:
《云革命》-(美) 查尔斯·巴布科克1、云最显著的特征——巨型互联网数据中心——并不是云的定义性特征,只是云的一个组件。 云实际上是数项技术的汇聚,数据中心、松散耦合(loosely coupled)网络协议、通过标准网络服务远程激活虚拟服务器的能力,正是因为这些技术汇聚在一起,云才具有强大的计算能力。2、云赋予用户对一部分数据中心的“程序控制权”(programmatic control),也就是,用户能够命令数据中心的服务器运行自己选择并发送的程序。 云用户不必让某人介入建立连接、打开机器、运行软件。相反,运用好刷上信用卡,点击想要激活的服务,就能“自助配置”(self-prov 阅读全文