会员
周边
众包
新闻
博问
闪存
赞助商
所有博客
当前博客
我的博客
我的园子
账号设置
简洁模式
...
退出登录
注册
登录
chinacloud
每天进步一点……
博客园
园子
首页
新随笔
联系
管理
订阅
2010年11月8日
好好学习一下经济
该文被密码保护。
阅读全文
posted @ 2010-11-08 11:19 chinacloud
阅读(9)
评论(0)
推荐(0)
编辑
百度Hadoop分布式系统揭秘:4000节点集群
摘要: 百度的高性能计算系统(主要是后端数据训练和计算)目前有4000节点,超过10个的集群,最大的集群规模在1000个节点以上。每个节点由8核CPU以及16G内存以及12TB硬盘组成,每天的数据生成量在3PB以上。规划当中的架构将有超过1万个节点,每天的数据生成量在10PB以上。底层的计算资源管理层采用了Agent调度不同类型的计算分别给MPI结构的算法和Map-Reduce和DAG算法应用等。而通过调...
阅读全文
posted @ 2010-11-08 11:16 chinacloud
阅读(6983)
评论(4)
推荐(1)
编辑
公告