博客新增音乐播放器，点击打开捷径，切换或暂停音乐。
06 2017 档案
摘要：一、Ambari简介 The Apache Ambari project is aimed at making Hadoop management simpler by developing software for provisioning, managing, and monitoring Ap
阅读全文
摘要：一、添加用户和用户组 adduser hadoop 将hadoop用户添加进sudo用户组 sudo usermod -G sudo hadoop 或者 visudo 二、安装jdk 具体操作参考：centos安装JDK 三、配置ssh免密登陆 具体才做可见：【linux系列】配置免密登陆 四、下载
阅读全文
摘要：一、在System类中查看方法的定义 二、示例
阅读全文
摘要：写在前面 因为最近在接触hadoop的东西，看示例WordCount的时候里面有一个StringTokenizer的东西特地看了一下 一、构造方法 StringTokenizer一共有如下三个构造方法 二、三种方法使用示例 三、StringTokenizer常用的方法hasMoreTokens(),
阅读全文
摘要：一、hadoop的配置文件分类 1、只读类型的默认文件 core-default.xml hdfs-default.xml mapred-default.xml mapred-queues.xml 2、定位设置 core-site.xml hdfs-site.xml mapred-site.xml
阅读全文
摘要：一、设置桥接模式 VMware->Edit->Virtual Network Edit 二、查看物理机的ip地址 三、根据物理机的ip地址，设置linux虚拟机的ip地址 四、网络重启 五、在/etc/sysconfig/network中添加网关地址 六、测试主机和虚拟机之间，网关、外网之间是否通
阅读全文
摘要：为hadoop集群在linux环境下配置ssh免密登录
阅读全文
摘要：一、检查vsftpd软件 如果发现上不了网可以修改配置文件中的ONBOOT=no改为yes，然后重启服务试试
阅读全文
摘要：一、安装JDK配置环境变量 已经安装略过 二、安装eclipse 已经安装略过 三、安装Ant 1、下载http://ant.apache.org/bindownload.cgi 2、解压 3、配置ANT_HOME环境变量 4、测试ant是否安装成功 四、安装hadoop插件 1、hadoop安装已
阅读全文
摘要：一、下载安装包 解压安装包并创建data,name,tmp文件夹 二、修改配置文件 1、core-site.xml 2、mapred-site.xml (修改原来的mapred-site.xml.template) 3、hdfs-site.xml 4、yarn-site.xml 四、替换原下载安装包
阅读全文
摘要：为了方便采用了Cygwin模拟linux环境的方法 一、安装JDK以及下载hadoop hadoop官网下载hadoop http://hadoop.apache.org/releases.html 。 二、安装Cygwin 1、http://www.cygwin.com/ 根据操作系统的需要下载3
阅读全文
摘要：一、HDFS介绍 HDFS为了做到可靠性（reliability）创建了多分数据块（data blocks）的复制（replicas）,并将它们放置在服务集群的计算节点中（compute nodes）,MapReduce就可以在他么所在的节点上处理这些数据了。 二、HDFS运行机制 一个名字节点和多
阅读全文
摘要：一、 Hadoop的来源 Hadoop是Google的集群系统的开源实现。 --Google集群系统：GFS(Google File System)、MapReduce、BigTable. --Hadoop主要由HDFS(Hadoop Distributed File System Hadoop分布
阅读全文
摘要：PV PV是网站分析的一个术语，用于衡量网站用户访问的网页的数量。对于广告投入商来说，PV值可以预期它可以带来多少收入广告，一般来说，OV与来访者的数量成正比，但是PV并不直接决定页面的真实来访者数量，如果如果一个来访者频繁的刷新也会制造出非常高的PV。 一、什么是PV值 PV(page view)
阅读全文
摘要：激活的时候采用server的方式 ：http://jetbrains.tech
阅读全文
摘要：刚接触python使用的是python2.x的书籍，但是发现python3.x和python2.x有不小的区别，以下做一些记录 性能 Py3.0运行 pystone benchmark的速度比Py2.5慢30%。Guido认为Py3.0有极大的优化空间，在字符串和整形操作上可 以取得很好的优化结果。
阅读全文
摘要：打印python2和python3的区别 如上图所示，我的 PyCharm安装的是python3.6如果使用print 10会出现语法错误，这是python2.x和python3.x的区别所导致的。
阅读全文
摘要：安装Python解释器 去python官网下载python的安装包（https://www.python.org/downloads/release/python-361/） 注意安装的时候选择配置python路径到path，也可以安装完之后自己进行配置。 配置python interpreter
阅读全文
摘要：测试账号注册 在中国银联商户服务系统的首页，注册一个账号，供我们测试账号使用. 注册地址：商户注册 注册号后，里面有详细的API和测试介绍. 下面是我注册成功后的测试参数信息. 测试商户号： 777290058112538 测试证书 : 商户私钥证书（签名使用,密码：000000）银联公钥证书（签名
阅读全文
