摘要:
mr 计算框架 假如有三台机器 统领者master 01 02 03 每台机器都有过滤的应用程序 移动数据 01机== 300M 》mr 移动计算 java程序传递给各个机器(mr) 伪分布式安装 一个机器上,即当namenode,又当datanode,或者说即是jobtracker,又是taskt 阅读全文
摘要:
Google的低成本之道 不使用超级计算机,不使用存储(淘宝的去i,去e,去o之路) (就是少用 I BM代表小型机 E MC代表企业级存储, O racle代表企业级数据库使用pc服务器和hadoop来部分代替上述软件的作用) 大量使用普通的pc服务器(去掉机箱,外设,硬盘), 提供有冗余的集 阅读全文
摘要:
集群是个物理形态,分布式是个工作方式。 只要是一堆机器,就可以叫集群,他们是不是一起协作着干活,这个谁也不知道; 一个程序或系统,只要运行在不同的机器上,就可以叫分布式,嗯,C/S架构也可以叫分布式。 集群一般是物理集中、统一管理的,而分布式系统则不强调这一点。 所以,集群可能运行着一个或多个分布式 阅读全文