上一页 1 ··· 42 43 44 45 46 47 48 49 50 ··· 59 下一页
摘要: 1. 关于Vim vim是我最喜欢的编辑器,也是linux下第二强大的编辑器。 虽然emacs是公认的世界第一,我认为使用emacs并没有使用vi进行编辑来得高效。 如果是初学vi,运行一下vimtutor是个聪明的决定。 (如果你的系统环境不是中文,而你想使用中文的vimtutor,就运行vimt 阅读全文
posted @ 2019-06-14 22:58 wqbin 阅读(13079) 评论(0) 推荐(1) 编辑
摘要: 如: tar提供了一种特殊的功能。这就是tar可以在打包或解包的同时调用其它的压缩程序,比如调用gzip、bzip2等。 1) tar调用gzip gzip是GNU组织开发的一个压缩程序,.gz结尾的文件就是gzip压缩的结果。与gzip相对的解压程序是gunzip。tar中使用-z这个参数来调用g 阅读全文
posted @ 2019-06-14 21:23 wqbin 阅读(455) 评论(0) 推荐(0) 编辑
摘要: 虽然zip命令能够很好的将数据压缩和归档到单个文件,蛋挞不是linux 和unix的标准归档工具。 ta命令最开始是用来将文件写到磁盘设备上的归档。然而他也能把输出写道文件里。 你会发现这个可选参数是真的多!!! 可以没有时间换成简易版:tar命令--数据归档(二) 阅读全文
posted @ 2019-06-14 21:12 wqbin 阅读(974) 评论(0) 推荐(0) 编辑
摘要: hive: 基于hadoop,数据仓库软件,用作OLAP OLAP:online analyze process 在线分析处理OLTP:online transaction process 在线事务处理 事务: ACID A:atomic 原子性 C: consistent 一致性 I:isolat 阅读全文
posted @ 2019-06-14 15:52 wqbin 阅读(791) 评论(0) 推荐(0) 编辑
摘要: 1. 概述 在传统数据库(如:MYSQL)中,JOIN操作是非常常见且非常耗时的。而在HADOOP中进行JOIN操作,同样常见且耗时,由于Hadoop的独特设计思想,当进行JOIN操作时,有一些特殊的技巧。 本文首先介绍了Hadoop上通常的JOIN实现方法,然后给出了几种针对不同输入数据集的优化方 阅读全文
posted @ 2019-06-14 14:30 wqbin 阅读(524) 评论(0) 推荐(0) 编辑
摘要: hive 的 join 类型有好几种,其实都是把 MR 中的几种方式都封装实现了,其中 join on、left semi join 算是里边具有代表性,且使用频率较高的 join 方式。 1、联系 他们都是 hive join 方式的一种,join on 属于 common join(shuffl 阅读全文
posted @ 2019-06-14 14:12 wqbin 阅读(3348) 评论(0) 推荐(0) 编辑
摘要: 案例情况:同事使用公司数据探查跑一段代码,部分代码如下,报错,显示不支持in内的子查询。但是直接用虚拟机去跑的话代码没有任何报错,也出结果,很奇怪。 Hive对子查询的支持很有限。它只允许子查询出现在SELECT语句的FROM子句中。如果发现Hive不支持你写的子查询,可以看看能不能把它写成连接操作 阅读全文
posted @ 2019-06-14 12:32 wqbin 阅读(16083) 评论(0) 推荐(1) 编辑
摘要: SET NOCOUNT ON , SET NOCOUNT OFF当 SET NOCOUNT 为 ON 时,不返回计数(表示受 Transact-SQL 语句影响的行数)。当 SET NOCOUNT 为 OFF 时,返回计数。如果存储过程中包含的一些语句并不返回许多实际的数据, 则该设置由于大量减少了 阅读全文
posted @ 2019-06-14 11:39 wqbin 阅读(617) 评论(0) 推荐(0) 编辑
摘要: root@d001:/home/centos# find / |grep cloudera-scm-agent.log/opt/cm-5.13.0/log/cloudera-scm-agent/cloudera-scm-agent.log.5/opt/cm-5.13.0/log/cloudera-s 阅读全文
posted @ 2019-06-12 10:24 wqbin 阅读(822) 评论(0) 推荐(0) 编辑
摘要: CDH安装失败了,如何重新安装 1> 删除Agent节点的UUID # rm -rf /opt/cm-5.13.0/lib/cloudera-scm-agent/* 2> 清空主节点CM数据库 进入主节点的Mysql数据库,然后drop database cdh; >你的可能是cm 3> 删除Age 阅读全文
posted @ 2019-06-11 16:38 wqbin 阅读(1328) 评论(0) 推荐(1) 编辑
上一页 1 ··· 42 43 44 45 46 47 48 49 50 ··· 59 下一页