河南许斌

  博客园  :: 首页  :: 新随笔  :: 联系 :: 订阅 订阅  :: 管理

2015年11月19日

摘要: 1. 免密码登陆2.做有机器更改用户名,只做用户名ip映射3.安装java环境4.安装Hadoop环境5.安装hive环境6.安装spark环境7....... 阅读全文
posted @ 2015-11-19 21:28 hacker的人生你不懂 阅读(146) 评论(0) 推荐(0) 编辑

摘要: 1.[-y install openssh openssh-clients openssh-server]2.[-y install wget]3.vi /etc/sysconfig/network-scripts/ifcfg-eth0------------------DEVICE=eth0HWA... 阅读全文
posted @ 2015-11-19 20:35 hacker的人生你不懂 阅读(564) 评论(0) 推荐(0) 编辑

2015年5月3日

摘要: Lucene是全文检索引擎一.在学习Lucene之前我们先思考下,Lucene存在的意义.1.在之前我们的应用场景中,基于数据库的检索,我们使用like语法进行.但是基于like语法效率低下.达不到我们对应用的使用要求.而使用Lucene对我们的数据建立索引效率高速度快,满足企业要求.我们使用Luc... 阅读全文
posted @ 2015-05-03 01:35 hacker的人生你不懂 阅读(292) 评论(0) 推荐(0) 编辑

2015年4月28日

摘要: 上节中简单介绍了传统的jdk中的线程的概念,本节中接着介绍下jdk5之后对线程处理有哪些改变。首先,介绍下java.util.concurrent包下有个字包atomic(原子的)包,其中的一些类提供原子性操作类,分别是:1 AtomicBoolean,2 AtomicInteger,AtomicI... 阅读全文
posted @ 2015-04-28 18:21 hacker的人生你不懂 阅读(271) 评论(0) 推荐(0) 编辑

2015年4月24日

摘要: 安装CentOS6.5系统点击回车OK。点击Test.等待。点击OK。点击OK。点击Continue。将ISO重新加载到VM。加载成功。选择English,然后点击OK。选择us,点击OK。选择Re-initialize all。点击OK。设置root用户密码为python,点击OK.点击Use A... 阅读全文
posted @ 2015-04-24 07:09 hacker的人生你不懂 阅读(223) 评论(0) 推荐(0) 编辑

2015年4月23日

摘要: HBase的集群搭建-hbase-cluster(在原来的hadoop0上的hbase伪分布基础上进行搭建)准备环境:三个节点hadoop环境,并且安装成功zookeeper。1. HBase的集群搭建1.1 集群结构,主节点(hmaster)是hadoop0,从节点(region server)是... 阅读全文
posted @ 2015-04-23 00:17 hacker的人生你不懂 阅读(322) 评论(0) 推荐(0) 编辑

摘要: HBase基础知识 HBase - Hadoop Database,是一个高可靠,高性能,面向列*,可伸缩的分布式存储系统。 利用HBase技术可在廉价PC Server上搭建起大规模结构化存储集群。 HBase利用Hadoop HDFS作为其文件存储系统,利用Hadoop MapReduce来处理... 阅读全文
posted @ 2015-04-23 00:14 hacker的人生你不懂 阅读(191) 评论(0) 推荐(0) 编辑

2015年4月9日

摘要: HBase的伪分布搭建安装版本: hbase-0.94.7-security.tar.gz下载路径: http://hbase.apache.org1. 解压缩,重命名,设置环境变量1 cp hbase-0.94.7-security.tar.gz /opt/ 2 3 tar -zxvf hbase... 阅读全文
posted @ 2015-04-09 21:46 hacker的人生你不懂 阅读(286) 评论(0) 推荐(0) 编辑

2015年4月7日

摘要: 准备环境 : 至少3个hadoop节点.zookeeper概念1.1 zk可以用来保证数据在zk集群之间的数据的事务性一致。数据不能太大,默认为2mb以下.安装zookeeper2. 如何搭建ZooKeeper服务器集群2.1 zk服务器机群规模不小于3个节点,要求各服务器之间系统时间要保持一致(保... 阅读全文
posted @ 2015-04-07 16:58 hacker的人生你不懂 阅读(204) 评论(0) 推荐(0) 编辑

2015年4月4日

摘要: 1. 修改主机名字 临时修改(session): sudo hostname orcll/etc/sysconfig/network -> HOSTNAME=hadoop0 #localhost.localdomain shutdown -r now 2.将hostname与ip绑定添加/etc/... 阅读全文
posted @ 2015-04-04 12:33 hacker的人生你不懂 阅读(184) 评论(0) 推荐(0) 编辑