随笔分类 -  mesos

Apache Mesos相关技术
摘要:转载自:http://dongxicheng.org/apache-mesos/mesos-base-libarary/1.Protocol bufferprotocalBuffer是google开源的用于数据交换的库,常用于跨语言的数据访问,担任的角色一般为对象的序列化/反序列化。 另一个与之类似的开源软件是facebook开源的thrift,它们两个最大区别是thrift提供了自动生成RPC的功能而Protocal Buffer需要自己实现,但ProtocalBuffer的一个优势是其序列化/反序列化非常高效。2.Libprocesslibprocess是采用C/C++编写的高效消息传递编 阅读全文
posted @ 2013-01-08 13:26 zaleilynn 阅读(1313) 评论(0) 推荐(0) 编辑
摘要:https://github.com/mesos/mesos/wiki/Using-ZooKeepermesos好像主要用zookeeper做为master选举,然后保持唯一的master在线http://dongxicheng.org/apache-mesos/meso-architecture/master做得尽可能地轻量级,其上面所有的元数据可以通过各个slave重新注册而进行重构,master里面包含的全为软状态 阅读全文
posted @ 2013-01-08 13:20 zaleilynn 阅读(261) 评论(0) 推荐(0) 编辑
摘要:转载自:http://blog.sina.com.cn/s/blog_4a1f59bf0100qotf.htmlHadoop的调度示意图如下所示:在Mesos资源管理平台上,启动Hadoop计算框架的时候,只是启动了它的JobTracker,而并没有启动TaskTracker,这主要考虑到资源伸缩性的管理。下面将介绍,当在这种框架下提交一个Hadoop作业时,调度系统如何工作的。在Mesos启动的时候,只启动了JobTracker,并没有启动TaskTracker,那么提交的作业如何执行呢?在Mesos分析3的介绍中,ResourceOffer ---》ReplyToOffer ---》Res 阅读全文
posted @ 2013-01-08 10:08 zaleilynn 阅读(595) 评论(0) 推荐(0) 编辑

点击右上角即可分享
微信分享提示