2015年12月4日

hadoop环境搭建-完全分布式
摘要： 用于测试，我用4台虚拟机搭建成了hadoop结构我用了两个台式机。一个xp系统，一个win7系统。每台电脑装两个虚拟机，要不然内存就满了。1、安装虚拟机环境 Vmware，收费产品，占内存较大。 或 Oracle的VirtualBox，开源产品，占内存较小，但安装ubuntu过程中，重启会出错... 阅读全文
posted @ 2015-12-04 21:52 ilinux_one 阅读(230) 评论(0) 推荐(0) 编辑
集群瓶颈：磁盘IO必读
摘要： 首先需要知道什么是IO： IO是输入输出接口阅读本文章可以带着下面问题1.集群的瓶颈为什么IO？2.你对IO了解多少？这里面只说个人观点：当我们面临集群作战的时候，我们所希望的是即读即得。可是面对大数据，读取数据需要经过IO，这里可以把IO理解为水的管道。管道越大越强，我们对于T级的数据读取就越快。... 阅读全文
posted @ 2015-12-04 21:27 ilinux_one 阅读(815) 评论(0) 推荐(0) 编辑
集群瓶颈为什么是磁盘io
摘要： 阅读本文思考：1.对磁盘IO了解多少2.为什么是磁盘IO是瓶颈，有没有自己的答案想了解磁盘io可以查看此帖：集群瓶颈：磁盘IO必读（磁盘IO：磁盘输出输出）集群的瓶颈提出多种看法，其中网络和磁盘io的争议比较大。这里需要说明的是网络是一种稀缺资源，而不是瓶颈。对于磁盘IO：当我们面临集群作战的时候，... 阅读全文
posted @ 2015-12-04 21:26 ilinux_one 阅读(933) 评论(0) 推荐(1) 编辑

导航