摘要:
目的 鉴于性能问题以及某些Java类库的缺失,对于某些组件,Hadoop提供了自己的本地实现。 这些组件保存在Hadoop的一个独立的动态链接的库里。这个库在*nix平台上叫libhadoop.so. 本文主要介绍本地库的使用方法以及如何构建本地库。 组件 Hadoop现在已经有以下 compression codecs本地组件: zlib gzip lzo 在以上组件中,... 阅读全文
2011年1月22日 #
摘要:
目的 这篇教程从用户的角度出发,全面地介绍了Hadoop Map/Reduce框架的各个方面。 先决条件 请先确认Hadoop被正确安装、配置和正常运行中。更多信息见: Hadoop快速入门对初次使用者。 Hadoop集群搭建对大规模分布式集群。 概述 Hadoop Map/Reduce是一个使用简易的软件框架,基于它写出来的应用程序能够运行在由上千个商用机器组成的大型集... 阅读全文
摘要:
引言 Hadoop分布式文件系统(HDFS)被设计成适合运行在通用硬件(commodity hardware)上的分布式文件系统。它和现有的分布式文件系统有很多共同点。但同时,它和其他的分布式文件系统的区别也是很明显的。HDFS是一个高度容错性的系统,适合部署在廉价的机器上。HDFS能提供高吞吐量的数据访问,非常适合大规模数据集上的应用。HDFS放宽了一部分POSIX约束,来实现流式读取文... 阅读全文
摘要:
目的 这篇文档的目的是帮助你快速完成单机上的Hadoop安装与使用以便你对Hadoop分布式文件系统(HDFS)和Map-Reduce框架有所体会,比如在HDFS上运行示例程序或简单作业等。 先决条件 支持平台 GNU/Linux是产品开发和运行的平台。 Hadoop已在有2000个节点的GNU/Linux主机组成的集群系统上得到验证。 Win32平台是作为开发平台支持的。由于分布... 阅读全文
摘要:
目的 本文描述了如何安装、配置和管理有实际意义的Hadoop集群,其规模可从几个节点的小集群到几千个节点的超大集群。 如果你希望在单机上安装Hadoop玩玩,从这里能找到相关细节。 先决条件 确保在你集群中的每个节点上都安装了所有必需软件。 获取Hadoop软件包。 安装 安装Hadoop集群通常要将安装软件解压到集群内的所有机器上。 通常,集群里的一台机器被指定为 Name... 阅读全文
摘要:
SDK文档显示iPad 2后置摄像头为100万像素 北京时间1月22日凌晨消息,据美国科技博客9 to 5 Mac报道,据一份最新iOS SDK(开发者工具)文档显示,苹果下一代iPad将采用100万像素的后置摄像头,能够拍摄720P质量的视频。 而前置摄像头分辨率为VGA,与iPhone 4和iPod touch四代相同。iPad 2前置摄像头同样支持FaceTime、照相和摄像功... 阅读全文
摘要:
【eNet硅谷动力资讯中心消息】1月21日消息,经历了2010年高速发展,中国的电子商务迎来了新的纪元。阿里巴巴研究中心今日发布了2010网商发展TOP10大事和2011年的五大预测,在对过去一年的发展进行梳理与归纳的同时,对新一年的发展进行了展望。 2010年度网商发展TOP10大事: 1.网购持续火爆创造历史。2010年中国网络购物市场延续用户规模、交易规模的双增长态势。据艾瑞咨询统计... 阅读全文
摘要:
【财新网】(记者 王姗姗)据英国《卫报》报道,Google公司执行董事长、原CEO埃里克•施密特于美国时间1月21日出售其个人名下53.4万股Google股票,套现3.27亿美元。 1月21日,Google股票以639.57美元开盘,开高低走,最终报收于611.83美元,较前一交易日收市价格下跌14.94美元,跌幅2.38%。据《卫报》的消息,施密特售出股票的交易价格为每股611.75美元... 阅读全文