爱看球的领带

摘要： 一、神马是高大上的MapReduce MapReduce是Google的一项重要技术，它首先是一个编程模型，用以进行大数据量的计算。对于大数据量的计算，通常采用的处理手法就是并行计算。但对许多开发者来说，自己完完全全实现一个并行计算程序难度太大，而MapReduce就是一种简化并行计算的编程模型，... 阅读全文

摘要： 一.HDFS出现的背景 随着社会的进步，需要处理数据量越来越多，在一个操作系统管辖的范围存不下了，那么就分配到更多的操作系统管理的磁盘中，但是却不方便管理和维护—>因此，迫切需要一种系统来管理多台机器上的文件，于是就产生了分布式文件管理系统，英文名成为DFS（Distributed File Sy... 阅读全文

摘要： 一、Hadoop的发展历史 说到Hadoop的起源，不得不说到一个传奇的IT公司—全球IT技术的引领者Google。Google（自称）为云计算概念的提出者，在自身多年的搜索引擎业务中构建了突破性的GFS（Google File System），从此文件系统进入分布式时代。除此之外，Google在... 阅读全文

摘要： 一、Hadoop来历 Hadoop的思想来源于Google在做搜索引擎的时候出现一个很大的问题就是这么多网页我如何才能以最快的速度来搜索到，由于这个问题Google发明了倒排索引算法，通过加入了Map-reduce的思想来计算Page Rank，通过不断的演变Google带给我们了GFS、Map-... 阅读全文

摘要： Google File System中文版Google Bigtable中文版 Google MapReduce中文版 阅读全文

摘要： 本文所用软件版本：myeclipe2014 hadoop1.2.11、安装Hadoop开发插件 下载hadoop-eclipse-plugin-1.2.1.jar，拷贝到myeclipse根目录下/dropins目录下。2、 启动myeclipse，打开Perspective：【Window】-... 阅读全文

摘要： 本文所用软件版本：VMware-workstation-full-11.1.0jdk-6u45-linux-i586.binubuntukylin-14.04-desktop-i386.iso第一步：安装JDK详见本博客 http://www.cnblogs.com/yangxiao99/p/451... 阅读全文

摘要： 一、下载myeclipse官网下载：http://www.myeclipseide.com/我使用的是myeclipse pro 2014.run，重命名为myeclipse.run示例路径:/usr/local/myeclipse/myeclipse2014示例文件名：myeclipse.run二... 阅读全文

摘要： apt-cache search package 搜索软件包apt-cache show package 获取包的相关信息，如说明、大小、版本等sudo apt-get install package 安装包sudo apt-get install package --reinstall 重新安装... 阅读全文

摘要： 我用的是jdk1.6.0_30版本。安装文件名为jdk-6u30-linux-i586.bin.1、复制jdk到安装目录（1）先将jdk安装文件在桌面，在此指定的安装目录是：/usr/local/java 。系统安装后在/usr/local下并没有java目录，所以先创建一个java文件夹，如图（1... 阅读全文