07 2016 档案

分析MapReduce执行过程
摘要：分析MapReduce执行过程 MapReduce运行的时候，会通过Mapper运行的任务读取HDFS中的数据文件，然后调用自己的方法，处理数据，最后输出。 Reducer任务会接收Mapper任务输出的数据，作为自己的输入数据，调用自己的方法，最后输出到HDFS的文件中。 Mapper任务的执行过 阅读全文
posted @ 2016-07-22 19:48 大葱拌豆腐 阅读(498) 评论(0) 推荐(0) 编辑
MapReduce框架Partitioner分区方法
摘要：前言：对于二次排序相信大家也是似懂非懂，我也是一样，对其中的很多方法都不理解诶，所有只有暂时放在一边，当你接触到其他的函数，你知道的越多时你对二次排序的理解也就更深入了，同时建议大家对wordcount的流程好好分析一下，要真正的知道每一步都是干什么的。 1.Partitioner分区类的作用是什么 阅读全文
posted @ 2016-07-21 22:40 大葱拌豆腐 阅读(1158) 评论(0) 推荐(0) 编辑
LVS+keepalived实现负载均衡
摘要：背景: 随着你的网站业务量的增长你网站的服务器压力越来越大？需要负载均衡方案！商业的硬件如F5又太贵，你们又是创业型互联公司如何有效节约成本，节省不必要 的浪费？同时实现商业硬件一样的高性能高可用的功能？有什么好的负载均衡可伸张可扩展的方案吗？答案是肯定的！有！我们利用 LVS+Keepalived 阅读全文
posted @ 2016-07-15 22:47 大葱拌豆腐 阅读(331) 评论(0) 推荐(0) 编辑
Nginx+Tomcat+Memcached集群
摘要：Tomcat集群session同步方案有以下几种方式： 使用tomcat自带的cluster方式，多个tomcat间自动实时复制session信息，配置起来很简单。但这个方案的效率比较低，在大并发下表现并不好。原理：http://zyycaesar.iteye.com/blog/296606 利用n 阅读全文
posted @ 2016-07-15 17:53 大葱拌豆腐 阅读(220) 评论(0) 推荐(0) 编辑
配置Nginx服务
摘要：一，安装之前准备1、nginx依赖: gcc openssl-devel pcre-devel zlib-devel 安装依赖：yum install gcc openssl-devel pcre-devel zlib-devel 2、创建用户和用户组。为了方便nginx运行而不影响linux安全( 阅读全文
posted @ 2016-07-14 22:52 大葱拌豆腐 阅读(230) 评论(0) 推荐(0) 编辑
echo -n -e参数详解
摘要：echo -n 不换行输出 最终输出 123456 而不是 123 456 echo -e 处理特殊字符 若字符串中出现以下字符，则特别加以处理，而不会将它当成一般文字输出： \a 发出警告声； \b 删除前一个字符； \c 最后不加上换行符号； \f 换行但光标仍旧停留在原来的位置； \n 换行且 阅读全文
posted @ 2016-07-13 23:44 大葱拌豆腐 阅读(244) 评论(0) 推荐(0) 编辑
nginx 编译安装
摘要：一、安装nginx时必须先安装相应的编译工具yum -y install gcc gcc-c++ autoconf automakeyum -y install zlib zlib-devel openssl openssl-devel pcre-develzlib:nginx提供gzip模块，需要 阅读全文
posted @ 2016-07-13 16:40 大葱拌豆腐 阅读(141) 评论(0) 推荐(0) 编辑
Linux下mysql编译安装
摘要：一．下载安装包 因为编译安装mysql需要cmake所以先编译安装cmake，这里都一起下载下来 二．编译安装cmake 解压cmake，比如tar -zxvf cmake-3.5.0.tar.gz ，进入主目录cd cmake-3.5.0 这里可以看到里面一些目录和文件，这里可以用bootstra 阅读全文
posted @ 2016-07-13 16:05 大葱拌豆腐 阅读(278) 评论(0) 推荐(0) 编辑
将CentOS配置成本地yum
摘要：默认的yum是以网络来安装的，在没有网络或者网速不佳的情况下，通过yum来安装软件是意见非常痛苦的事情。其实对于CentOS DVD来说，里面提供的软件就足以满足我们的需要了，而且DVD里的软件版本都是稳定版，下载速度还快，对于学习CentOS来说，将CentOS DVD作为默认yum源可以大大提高 阅读全文
posted @ 2016-07-10 21:18 大葱拌豆腐 阅读(337) 评论(0) 推荐(0) 编辑
将Centos的yum源更换为国内的阿里云源
摘要：安装完CentOS6.5后，为避免从国外站点安装更新速度过慢，需要更改yum更新源，所以从网上找了下更改linux yum源的方法，和大家进行下分享。原理很简单，就是把yum配置文件中的更新源改一下，这里直接用阿里云的镜像站点中的配置文件。 第一步：备份你的原镜像文件，以免出错后可以恢复。 第二步： 阅读全文
posted @ 2016-07-10 21:06 大葱拌豆腐 阅读(482) 评论(0) 推荐(0) 编辑
Mount挂载命令使用方法
摘要：语法： mount -t 类型 -o 挂接方式 源路径 目标路径 -t 详细选项: 光盘或光盘镜像：iso9660 DOS fat16文件系统：msdos Windows 9x fat32文件系统：vfat Windows NT ntfs文件系统：ntfs Mount Windows文件网络共享：s 阅读全文
posted @ 2016-07-10 11:01 大葱拌豆腐 阅读(343) 评论(0) 推荐(0) 编辑
Java中Collection和Collections的区别
摘要：1、java.util.Collection 是一个集合接口（集合类的一个顶级接口）。它提供了对集合对象进行基本操作的通用接口方法。Collection接口在Java 类库中有很多具体的实现。Collection接口的意义是为各种具体的集合提供了最大化的统一操作方式，其直接继承接口有List与Set 阅读全文
posted @ 2016-07-02 23:40 大葱拌豆腐 阅读(242) 评论(0) 推荐(0) 编辑
HashMap和Hashtable的区别
摘要：1 HashMap不是线程安全的 hastmap是一个接口 是map接口的子接口，是将键映射到值的对象，其中键和值都是对象，并且不能包含重复键，但可以包含重复值。HashMap允许null key和null value，而hashtable不允许。 2 HashTable是线程安全的一个Collec 阅读全文
posted @ 2016-07-02 23:39 大葱拌豆腐 阅读(164) 评论(0) 推荐(0) 编辑

点击右上角即可分享
微信分享提示