04 2017 档案

摘要:安装win10后想体验系统自带的Linux bash。但是安装总是报错。于是选用cmder cmder下载地址: http://cmder.net/ 根据自己的需求选择下载 mini 或 full版本(full集成了git) 解压后即可使用。 1、把 Cmder 加到环境变量 把Cmder.exe存 阅读全文
posted @ 2017-04-28 21:03 0xcafedaddy 阅读(763) 评论(0) 推荐(0) 编辑
摘要:今天在使用POI导出数据时,出现如下错误: 开始我以为是java分配内存不够用,使用命令指定JVM大小后仍然出现错误。 /usr/local/java/jdk1.8.0_121/bin/java -Xmx1024m -Xms512m -jar exWeMedia.jar 最后发现是EXCEL问题: 阅读全文
posted @ 2017-04-27 17:42 0xcafedaddy 阅读(968) 评论(0) 推荐(0) 编辑
摘要:1.the HTTP rewrite module requires the PCRE library. 安装pcre-devel: yum -y install pcre-devel yum install -y zlib-devel yum install openssl yum install 阅读全文
posted @ 2017-04-24 14:43 0xcafedaddy 阅读(632) 评论(0) 推荐(0) 编辑
摘要:准备工作: 1.apache官网下载flume 2.解压flume 3.修改flume-env.sh,配置JAVA_HOME NetCat采集Demo: 1.在conf中创建netcat-logger.conf 2.启动agent采集数据 -c conf 指定flume自身的配置文件所在目录 -f 阅读全文
posted @ 2017-04-24 14:24 0xcafedaddy 阅读(196) 评论(0) 推荐(0) 编辑
摘要:Flume官网:http://flume.apache.org/ Flume和Kafaka使用上的区别: 采集的数据放到HDFS为MR进行使用,选择Flume Flume分布式系统中最核心的角色是agent,flume采集系统就是由一个个agent所连接起来形成 每一个agent相当于一个数据传递员 阅读全文
posted @ 2017-04-24 14:06 0xcafedaddy 阅读(111) 评论(0) 推荐(0) 编辑
摘要:hbase进行数据处理 1、插入的数据会按照字典顺序进行排序,前台的查询速度会很快。 2、hbase会根据每一行的主键(ROWKEY)的字典顺序将数据排序 3、hbase的表默认是分布式实现的,每台机器管若干行,优点是表可以进行无限的扩容。reason存在HDFS 4、hbase不提供复杂的join 阅读全文
posted @ 2017-04-23 17:29 0xcafedaddy 阅读(134) 评论(0) 推荐(0) 编辑
摘要:### 下载KAFKA```http://kafka.apache.org/downloads```<hr><br> ### 解压并修改配置文件* vim config/server.properties ```#broker的全局唯一编号,不能重复broker.id=0 #用来监听链接的端口,pr 阅读全文
posted @ 2017-04-23 17:26 0xcafedaddy 阅读(166) 评论(0) 推荐(0) 编辑
摘要:azkaban占位 阅读全文
posted @ 2017-04-21 20:28 0xcafedaddy 阅读(104) 评论(0) 推荐(0) 编辑
摘要:## sqoop简介 * Sqoop是用来实现结构型数据(如关系数据库)和Hadoop之间进行数据迁移的工具。它充分利用了MapReduce的并行特点以批处理的方式加快数据的传输,同时也借助MapReduce实现了容错。 * sqoop1的最新版本是1.4.5,sqoop2的最新版本是1.99.3; 阅读全文
posted @ 2017-04-21 20:28 0xcafedaddy 阅读(120) 评论(0) 推荐(0) 编辑
摘要:1.下载地址: http://www.apache.org/dyn/closer.cgi/hive/ 2.解压 3.hive配置 1.修改hive-env.sh,添加如下信息 2.修改hive-site.xml <property> <name>javax.jdo.option.Connection 阅读全文
posted @ 2017-04-21 20:27 0xcafedaddy 阅读(190) 评论(0) 推荐(0) 编辑
摘要:Es查询,解构类似: A & (a & b & c) or (c & e) JavaAPI写法: JSON正确格式: JSON错误写法: { "from": 0, "size": 50, "query": { "bool": { "must": [ { "term": { "flag_off": { 阅读全文
posted @ 2017-04-19 16:43 0xcafedaddy 阅读(2117) 评论(1) 推荐(0) 编辑
摘要:如果你有时间,如果有英语还不错能看懂国外的推广营销知识,如果你想做个实战者,如果你想比别人多领先,如果你爱好这个推广行业,如果你不想做河塘里的小鱼,如果····请一个个的看以下的站点,个人觉得会给你另外一个觉悟的层次高度。以下的站点如果你有什么看不懂的,请尽管与大W交流。留言是肯定看不到的,太多的s 阅读全文
posted @ 2017-04-17 20:42 0xcafedaddy 阅读(1105) 评论(0) 推荐(0) 编辑
摘要:原文:http://mirrors.aliyun.com/help/centos?spm=5176.bbsr150321.0.0.d6ykiD 1、备份 mv /etc/yum.repos.d/CentOS-Base.repo /etc/yum.repos.d/CentOS-Base.repo.ba 阅读全文
posted @ 2017-04-13 14:42 0xcafedaddy 阅读(164) 评论(0) 推荐(0) 编辑
摘要:MySql存储过程一例 阅读全文
posted @ 2017-04-11 11:23 0xcafedaddy 阅读(129) 评论(0) 推荐(0) 编辑
摘要:最近把工程改为Hibernate和MyBatis并存,并存只要注意两点即可: 1.使用同一个dataSource 2.事物交给Hibernate进行管理(Hibernate4+) Hibernate做CUD操作 MyBatis负责R 在整合完成之后发现一个问题。使用MyBatis进行查询报错: In 阅读全文
posted @ 2017-04-10 11:48 0xcafedaddy 阅读(181) 评论(0) 推荐(0) 编辑
摘要:转载:http://blog.csdn.net/HADOOP_83425744/article/details/49560583 http://bigdatadecode.club/MapReduce%E6%BA%90%E7%A0%81%E8%A7%A3%E6%9E%90--%E7%8E%AF%E5 阅读全文
posted @ 2017-04-07 11:07 0xcafedaddy 阅读(1623) 评论(0) 推荐(0) 编辑
摘要:转载:http://blog.tianya.cn/m/post.jsp?postId=53271442 1、MapReduce中数据流动 (1)最简单的过程: map - reduce (2)定制了partitioner以将map的结果送往指定reducer的过程: map - partition  阅读全文
posted @ 2017-04-07 10:33 0xcafedaddy 阅读(456) 评论(0) 推荐(0) 编辑
摘要:NullWritable是Writable的一个特殊类,实现方法为空实现,不从数据流中读数据,也不写入数据,只充当占位符,如在MapReduce中,如果你不需要使用键或值,你就可以将键或值声明为NullWritable,NullWritable是一个不可变的单实例类型。 比如,我设置map的输出为< 阅读全文
posted @ 2017-04-05 19:49 0xcafedaddy 阅读(204) 评论(0) 推荐(0) 编辑

点击右上角即可分享
微信分享提示