2016年6月27日
Hadoop集群（第7期）_Eclipse开发环境设置
摘要： 1、Hadoop开发环境简介 1.1 Hadoop集群简介 Java版本：jdk-6u31-linux-i586.bin Linux系统：CentOS6.0 Hadoop版本：hadoop-1.0.0.tar.gz 1.2 Windows开发简介 Java版本：jdk-6u31-windows-i5 阅读全文
posted @ 2016-06-27 09:28 吴建良 阅读(280) 评论(0) 推荐(0) 编辑
Hadoop集群（第6期）_WordCount运行详解
摘要： 1、MapReduce理论简介 1.1 MapReduce编程模型 MapReduce采用"分而治之"的思想，把对大规模数据集的操作，分发给一个主节点管理下的各个分节点共同完成，然后通过整合各个节点的中间结果，得到最终结果。简单地说，MapReduce就是"任务的分解与结果的汇总"。 在Hadoop 阅读全文
posted @ 2016-06-27 09:27 吴建良 阅读(257) 评论(0) 推荐(0) 编辑
Hadoop集群（第5期）_Hadoop安装配置
摘要： 1、集群部署介绍 1.1 Hadoop简介 Hadoop是Apache软件基金会旗下的一个开源分布式计算平台。以Hadoop分布式文件系统（HDFS，Hadoop Distributed Filesystem）和MapReduce（Google MapReduce的开源实现）为核心的Hadoop为用 阅读全文
posted @ 2016-06-27 09:26 吴建良 阅读(525) 评论(0) 推荐(0) 编辑
Hadoop集群（第4期）_SecureCRT使用
摘要： 1、SecureCRT简介 SecureCRT是一款支持SSH（SSH1和SSH2）的终端仿真程序，同时支持Telnet和rlogin协议。SecureCRT是一款用于连 接运行包括Windows、UNIX和VMS的远程系统的理想工具。通过使用内含的VCP命令行程序可以进行加密文件的传输。有流行CR 阅读全文
posted @ 2016-06-27 09:24 吴建良 阅读(277) 评论(0) 推荐(0) 编辑
Hadoop集群（第3期）_VSFTP安装配置
摘要： 1、VSFTP简介 VSFTP是一个基于GPL发布的类Unix系统上使用的FTP服务器软件，它的全称是Very Secure FTP 从此名称可以看出来，编制者的初衷是代码的安全。 安全性是编写VSFTP的初衷，除了这与生俱来的安全特性以外，高速与高稳定性也是VSFTP的两个重要特点。 在速度方面， 阅读全文
posted @ 2016-06-27 09:22 吴建良 阅读(255) 评论(0) 推荐(0) 编辑
2016年6月24日
Hadoop(2)_机器信息分布表
摘要： 1、分布式环境搭建 采用4台安装Linux环境的机器来构建一个小规模的分布式集群。 图1 集群的架构 其中有一台机器是Master节点，即名称节点，另外三台是Slaver节点，即数据节点。这四台机器彼此间通过路由器相连，从而实验相互通信以及数据传输。它们都可以通过路由器访问Internet，实验网页 阅读全文
posted @ 2016-06-24 18:10 吴建良 阅读(193) 评论(0) 推荐(0) 编辑
Hadoop(1)
摘要： 1、准备安装 1.1 系统简介 CentOS 是什么？ CentOS是一个基于Red Hat 企业级 Linux 提供的可自由使用的源代码企业级的 Linux 发行版本。每个版本的 CentOS 都会获得七年的支持（通过安全更新方式）。新版本的 CentOS 每两年发行一次，而每个版本的 CentO 阅读全文
posted @ 2016-06-24 18:09 吴建良 阅读(243) 评论(0) 推荐(0) 编辑
SQL 数据库优化
摘要： 1.对查询进行优化，应尽量避免全表扫描，首先应考虑在 where 及 order by 涉及的列上建立索引。2.应尽量避免在 where 子句中对字段进行 null 值判断，否则将导致引擎放弃使用索引而进行全表扫描，如：select id from t where num is null可以在num 阅读全文
posted @ 2016-06-24 09:30 吴建良 阅读(245) 评论(0) 推荐(0) 编辑
2016年6月23日
MySQL 的各种查询列子
摘要： 一、mysql查询的五种子句 where(条件查询)、having（筛选）、group by（分组）、order by（排序）、limit（限制结果数） 1、where常用运算符： 比较运算符 > , < ,= , != （< >）,>= , <= in(v1,v2..vn) between v1 阅读全文
posted @ 2016-06-23 15:38 吴建良 阅读(412) 评论(0) 推荐(0) 编辑
Mysql 基础
摘要： 1、连接Mysql 格式： mysql -h主机地址 -u用户名 －p用户密码 1、连接到本机上的MYSQL。 首先打开DOS窗口，然后进入目录mysql\bin，再键入命令mysql -u root -p，回车后提示你输密码.注意用户名前可以有空格也可以没有空格，但是密码前必须没有空格，否则让你重 阅读全文
posted @ 2016-06-23 14:57 吴建良 阅读(167) 评论(0) 推荐(0) 编辑