摘要:
上文中本人是通过Hadoop的eclipse插件来管理HDFS文件系统的,在实际生产环境通常是用编程的方式来管理hadoop的文件系统下面我们编程方式开发一个管理hadoop文件系统的应用首先打开eclipse开发工具,新建Map/Reduce Project项目点击Next,填写项目名称,并且配置... 阅读全文
2013年6月2日 #
2013年6月1日 #
摘要:
在上文中我们已经学会了如何启动hadoop,可以通过jps命令查看运行中的进程启动hadoop后,我们可以用通过配置hadoop的eclipse插件管理HDFS文件系统在eclipse开发工具打开Map/Reduce视图,新建hadoop location上面的相关配置与配置文件mapred-sit... 阅读全文
2013年5月31日 #
摘要:
转载自 http://www.dadclab.com/archives/2554看过第一篇虚拟化技术与评测的各个虚拟机软件简介、第二篇评测软件逐一详细介绍的观众估计对Win8 + Hyper-V 虚拟机已经有了一定的认知吧,今天小编跟大家分享的是测试流程,让大家能清楚的了解评测过程中的各种数据参数……本次测试的物理机是编者的 DELL N5010 笔记本,先看下物理机的配置吧:宿主机系统:Windows 7 x64 SP1 旗舰版Linux测试环境:Fedora 17(内核版本:Linux 3.3.4-5 )Windows测试环境:Windows 7 x64 SP1 UltimateWindo 阅读全文
摘要:
转载自 http://www.dadclab.com/archives/2509经过一番艰苦卓绝的斗争和艰苦卓绝的收集各类数据,终于把这篇科普的文章整理完整弄上来了。本文简要概述Win8+Hyper-V 技术,以及 Win8+Hyper-V、Win8+VMware9、Win8+VirtualBox、... 阅读全文
摘要:
转载自 http://www.dadclab.com/archives/2549小编已经在第一篇中跟大家简单科普了虚拟化技术,并介绍了一下参与评测的各个虚拟机软件。那么今天的第二篇将会对评测软件进行逐一的介绍。对于这次评测,编者也做了很广泛的研究,一开始敲定仅仅使用 Pcmark7 来作为测试软件,... 阅读全文
摘要:
本文接下来描述hadoop-1.2.0的系统搭建,在搭建环境的过程中可能会碰到很多问题,需要考验开发人员的足够的耐心本人的系统环境是linuxmint15 64bit1)Hadoop的基本安装a.首先需要编译hadoop-1.2.0系统,在终端进入${hadoop.root}目录,执行ant ecl... 阅读全文
摘要:
本文接下来描述将hadoop-1.2.0的源码导入到eclipse环境中本人的系统环境是linuxmint15 64bit前提条件是系统已经安装jdk ant ivy并配置好相关环境变量在终端进入${hadoop.root}目录,执行ant eclipse命令,会自动下载相关依赖jar,编译项目然后... 阅读全文
摘要:
这个世界变化的太快,本人上文写完编译hadoop1.1.2版本的eclipse插件,hadoop的1.2.0的release版本就已经发布了,要我们这些开发人员情何以堪呢既然hadoop版本1.2.0发布出来了,我们也不甘落后本人这次的编译环境是linuxmint15 64bit,与上文的编译环境w... 阅读全文
2013年5月27日 #
摘要:
以前开发过数据采集的程序,这段时间重新翻出来重构了一下代码,程序还有很多需要改进的地方web数据采集从http提交方式可分为get方式和post方式(其实还有其他方式,不过目前浏览器不支持),针对这两种方式的数据采集,当时本人通过继承抽象父类的方式来实现这两种采集方式的请求参数封装类,post方式的... 阅读全文
2013年5月23日 #