会员
周边
众包
新闻
博问
闪存
赞助商
所有博客
当前博客
我的博客
我的园子
账号设置
简洁模式
...
退出登录
注册
登录
数据指南
博客园
首页
新随笔
联系
订阅
管理
上一页
1
···
7
8
9
10
11
12
13
14
下一页
2019年8月28日
linux ``与"" ''区别
摘要: `` :反引号,获取执行命令的结果 打印日期: echo `date` --》 输出 2017年12月 8日 星期五 11时59分48秒 CST '' : 去掉 所有符号的特殊含义。 "" : 不去掉符号的特殊含义。
阅读全文
posted @ 2019-08-28 16:02 啊啊啊啊鹏
阅读(3225)
评论(0)
推荐(0)
编辑
环境变量 何时source /etc/profile
摘要: “ssh 主机名 命令” 时 每执行一条登陆+命令时不会加载环境变量,需要手动source
阅读全文
posted @ 2019-08-28 09:24 啊啊啊啊鹏
阅读(596)
评论(0)
推荐(0)
编辑
2019年8月17日
hbase delete.deleteColumns问题
摘要: delete.deleteColumns是删除某个列簇里的所有时间戳版本 但是删除不了自己加入的时间戳
阅读全文
posted @ 2019-08-17 20:44 啊啊啊啊鹏
阅读(305)
评论(0)
推荐(0)
编辑
2019年8月12日
为什么kafka的消费者要有分组的概念
摘要: 通常一个分区由一个消费者消费,或者说由一个组中的一个消费。 有一种情况,分区数多,且只有一个消费者时,分组的话,消息会被组中唯一一个消费者线性消费,不会发生争抢。因为消息能被组中一个消费者线性消费。 不分组的话会消息都会被消费者拉过去。
阅读全文
posted @ 2019-08-12 18:37 啊啊啊啊鹏
阅读(2210)
评论(0)
推荐(0)
编辑
2019年8月10日
关于hive中.conf配置文档中sink为avro的端口问题
摘要: 本机中avro为输出时端口号为目标主机的端口号,向hostname参数的主机的端口号发送数据 本机中avro为输入时端口号为自己的端口号,从本机端口号读取数据
阅读全文
posted @ 2019-08-10 16:23 啊啊啊啊鹏
阅读(296)
评论(0)
推荐(0)
编辑
2019年8月8日
hive中sql执行顺序
摘要: 1.from 2.join on 或 lateral view explode(需炸裂的列) tbl as 炸裂后的列名 3.where 4.group by (开始使用select中的别名,从group 开始往后都可用) 5.聚合函数 如Sum() avg() count(1)等 6.having
阅读全文
posted @ 2019-08-08 16:48 啊啊啊啊鹏
阅读(3627)
评论(0)
推荐(1)
编辑
2019年8月7日
关于在hdfs上对数据创建外部表的原因
摘要: 对hdfs 上原始数据创建 外部表,然后通过查询插入的方式创建一张内部表,这样相当于复制一份表数据,而原始的数据并没有改变,不会干涉同事使用原始数据。
阅读全文
posted @ 2019-08-07 16:20 啊啊啊啊鹏
阅读(641)
评论(0)
推荐(0)
编辑
2019年8月6日
关于hive中Map join 时大表left join小表的问题
摘要: 在hive中,(启用Map join时) 大表left join小表,加载从右向左,所以小表会加载进内存,存储成map键值对,通过大表驱动小表,来进行join,即大表中的join字段作为key 来获取value进行join。 在MySQL中,left join加载从左向右,即join左边的表会先加载
阅读全文
posted @ 2019-08-06 19:01 啊啊啊啊鹏
阅读(10129)
评论(0)
推荐(0)
编辑
2019年8月4日
sql原理-语句执行顺序
摘要: 一、sql执行顺序 (1)from (3) join (2) on (4) where (5)group by(开始使用select中的别名,后面的语句中都可以使用)(6) avg,sum.... (7)having (8) select (9) distinct (10) order by 从这个
阅读全文
posted @ 2019-08-04 18:27 啊啊啊啊鹏
阅读(483)
评论(0)
推荐(0)
编辑
2019年7月10日
redis用途
摘要: 分布式锁(string) setnx key value,当key不存在时,将 key 的值设为 value ,返回1。若给定的 key 已经存在,则setnx不做任何动作,返回0。 当setnx返回1时,表示获取锁,做完操作以后del key,表示释放锁,如果setnx返回0表示获取锁失败。设置过
阅读全文
posted @ 2019-07-10 09:31 啊啊啊啊鹏
阅读(238)
评论(0)
推荐(0)
编辑
上一页
1
···
7
8
9
10
11
12
13
14
下一页
公告
1 2