摘要:
Apache Ambari是对Hadoop进行监控、管理和生命周期管理的开源项目。它也是一个为Hortonworks数据平台选择管理组建的项目。Ambari向Hadoop MapReduce、HDFS、 HBase、Pig, Hive、HCatalog以及Zookeeper提供服务。最近准备装ambari,在网上找了许久,没找到比较系统的ambari安装过程,于是,就根据官网进行了安装,下面是我推荐的正确的较完善的安装方式,希望对大家有所帮助。 一、准备工作 1、系统:我的系统是CentOS6.2,x86_64,本次集群采用两个节点。管理节点:192.168.10.121;客户端节点:... 阅读全文
摘要:
一 准备 hadoop版本:1.0.3,GenericOptionsParser所在的包:org.apache.hadoop.util 学习方法:理解GenericOptionsParser这个解析器的使用地方,从构造函数入手,理解GenericOptionsParser整个类的使用情况。 时间:2013-02-21二 GenericOptionsParser功能描述 GenericOptionsParser是hadoop框架中解析命令行参数的基本类。它能够辨别一些标准的命令行参数,能够使应用程序轻易地指定namenode,jobtracker,以及其他额外的配置资源。一般它使用方法... 阅读全文
摘要:
今天突然想玩玩json,苦于没有素材,忽然想到一般查询手机归属地内容应该很好用json格式保存,在网上找到了淘宝的归属地API,并下了处理json相关的jar包,动手玩了起来。整个例子挺简单的,只是在java处理字符乱码时稍微理了下头绪。View java Code 1 package com.think.java; 2 3 import java.io.BufferedReader; 4 import java.io.InputStream; 5 import java.io.InputStreamReader; 6 import java.net.MalformedURLExcep... 阅读全文
摘要:
一 准备 hadop版本:1.0.3,DataNode所在的包:org.apache.hadoop.hdfs.server.datanode 学习方法:整理datanode类重要的方法、属性并理解,参考相关博客分析,最终理解datanode功能,再深入研究具体代码。 时间:2013-01-22 -- 2013-01-28二 DataNode功能描述 DataNode是一个为分布式文件系统的调用存储数据块集的类。简单的调用就能启动一个或很多个数据节点。每个数据节点通常和一单个主节点通信,同时它也随时和客户端、其他数据节点保持通信。 数据节点存储着一系列数据块,它允许客户端去读这些数据块... 阅读全文
摘要:
一 准备 hadop版本:1.0.3 学习方法:在学习datanode类过程中,发现它引用DataXceiverServer这个类,同时配合DataNode的理解,学习DataXceiverServer。 时间:2013-01-27二 DataXceiverServer功能描述 DataXceiverServer类是DataNode的辅助类,它最主要是用来实现客户端或其他数据节点与当前节点通信,并负责接收/发送数据块。这个类的创建是为了监听来自客户端或其他数据节点的请求。 它的实现通信的方法不是用hadoop IPC,而是用jdk本身就有的ServerSocket。三 DataXcei... 阅读全文
摘要:
View Code 1 proxytest]# javah ObjectTransmitter 2 错误:无法访问 ObjectTransmitter 3 错误的类文件: ./ObjectTransmitter.class 4 类文件包含错误的类: com.zuishiming.proxytest.ObjectTransmitter 5 请删除该文件或确保该文件位于正确的类路径子目录中。 6 com.sun.tools.javac.util.Abort 7 at com.sun.tools.javac.comp.Check.completionError(Check.java:16... 阅读全文
摘要:
月光博客seo每天一贴虎嗅网李岩的博客中邮阅读网,专门看电子期刊的,很不错的免费阅读期刊网。seay web安全技术博客:http://www.cnseay.com陆陆续续编辑中... 阅读全文
摘要:
打工人生与创业人生打工人生与创业人生一定是不一样的。打工生涯学到的东西对创业基本上是没有用的,因为两者的角度不同,思考方式不同,得到的经验也不同,只能这么说,打工几年后你唯一获得提高的是打工的技能,而创业最不需要的就是打工的技能了。可怕的是,打工几年后,年轻人普遍会丧失创业的激情,丧失初生牛犊不怕虎的勇气,越来越沉湎于单位之中难以自拔,创业的念头只能永远的留在心底,成为永久的遗憾。打工时间长了,打工者的性格与创业者的性格会有越来越大的差别。我们扪心自问,打工时间长的朋友更加患得患失,害怕外面陌生的世界,害怕失业的危险,心灵变得越来越敏感和脆弱,不仅逐渐的疲惫和懒惰,整个人也没有了锐气和精神,只 阅读全文
摘要:
上海和平茶城:营业时间:08:30-20:30地址:上海市虹口区大连路1079号(和平公园旁)电话:65032717和平茶城位于虹口区大连路1079号,毗邻和平公园。总面积约5000平方米,包括三层主楼和配套的仓储,有近120个铺位并规划100多个车位,茶城规划有一楼名茶综合市场、二楼精品市场和三楼古玩字画区,是集茶叶交易、名茶展示、精美茶具、茶壶工艺品于一体的大型专业茶叶市场。和平茶城以高端的定位,简洁典雅的装修风格,整合优势资源,海纳四海茶商,于2010年6月17日正式对外开门营业。目前和平茶城启动三楼古玩字画区招商,招商和经营情况非常良好。是虹口区和杨浦区目前唯一的大型茶叶市场交易平台。 阅读全文
摘要:
网上购物最让人关注的一环,就在于账户和支付的安全性,在没有亲身经历此次京东账号被盗之前,我真没有想到,一个国内近乎最大的B2C网络商城,账户安全和内部管理做的居然是如此混乱。首先交代下背景:众所周知,京东的账号安全包括四部分,两个密码:登录密码和支付密码;两个密保:邮箱验证和手机验证。在正常情况下,无论是想改动哪个密码,都必须通过至少一种密码的验证,也就是说,至少要通过手机收取验证码,或者通过点击邮箱当中的验证链接实现确认的目的。从这个设计上看,支付环节还是足够安全的。本人从事互联网工作,对计算机日常安全还算熟稔,计算机系统确保没有中毒,密码也没有受到CSDN风波的干扰,网购了也快十万的东西了 阅读全文
摘要:
谷歌关闭中国区购物搜索,为了更好地优化资源?谷歌搜索的市场份额下降到5.08%,不是谷歌做得不好,是它的不幸吧。有没有发现,现在用谷歌搜索,经常打不开网页,慢慢地,用户也就越跑越远了。谷歌今天在电邮声明中表示,关闭该服务是因为它未能为企业带来我们之前所期望的影响力。谷歌购物搜索引擎此前与阿里巴巴集团旗下的一淘网竞争。早在9月21日,谷歌也关闭了其在中国运营了三年时间的音乐搜索服务。谷歌在声明中称,“我们仍然致力于帮助中国企业将其商品出口到世界各地。”在中国,谷歌将专注于“AdMob应用内移动广告业务,移动和桌面显示,以及以出口为方向的搜索广告业务”。 我们看到百度有啊之前也关闭了,购物搜索.. 阅读全文
摘要:
A:RPM是什么?RPM(Red Hat Package Manager)是用于 Linux 分发版(distribution)的最常见的软件包管理器。RPM包命名方式:name-version-release.architecture.rpm如:hadoop-1.0.3-1.el6.x86_64.rpm,hadoop-1.0.3-2.el6.noarch.rpmB:RPM能做什么? RPM有五种基本的操作功能:安装、卸载、升级、查询和验证。这五种基本功能的实现仅仅需要用rpm + 选项 + rpm包就能轻易地实现。这五个功能常用的方式如下(以mysql为例):安装: rpm –ivh mys 阅读全文
摘要:
核心提示:12月10日,国务院公布2013年放假安排。根据安排,元旦1月1日至3日放假3天,节后连上8天班;春节2月9日至15日放假7天,节后连上7天班;中秋假期为9月19日至21日,国庆节10月1日至7日,端午节前连上7天班。全年7个节假日共放假29天,剔除周六日假期剩11天。点击图片看大图国务院办公厅关于2013年部分节假日安排的通知国办发明电〔2012〕33号各省、自治区、直辖市人民政府,国务院各部委、各直属机构:根据国务院《关于修改<全国年节及纪念日放假办法>的决定》,为便于各地区、各部门及早合理安排节假日旅游、交通运输、生产经营等有关工作,经国务院批准,现将2013年元旦 阅读全文
摘要:
Cloudera Manager的CDH4主机修改和服务重装 前段时间安装好了CDH4.1后,运行了一段时间,后来,把主机IP地址改掉了,但是发现服务都启动不了,怎么办呢?想到的解决方式如下:把主机IP地址改回来CDH4.1上的IP地址改成和主机IP地址一样。 如下图,是我安装的CDH4.1的主机情况。 第一种方法改回主机IP地址后,重启Cloudera相关服务后,能正常运行。当我试第二种方法却发现,没地方改IP地址,因为,这台机器是Cloudera Manager的管理节点,无法直接修改IP地址。既然无法直接修改IP地址,那么只能重装,把现有的主机删掉,然后重新把所有服务装到主机目前的... 阅读全文
摘要:
最近在Linux下学习创建RPM包,找了很多资料,后来自己在创建RPM包时碰到一个问题终于解决,欣喜啊。。。一定要相信,只要不懈探索,或许时间会长一点,或许会绕很多弯路,但是问题是一定能够解决的,不要怀疑自己解决问题的能力及智慧。以下是所碰到的问题:RPM build errors: File not found: /root/rpmbuild/BUILDROOT/hadoop-1.1.1-1.el6.i386/etc/hadoop/conf/capacity-scheduler.xmlRPM在用rpmbuild -ba hadoop.spec出现的错误,具体的原因容我理解完创建rpm包... 阅读全文