2017年9月21日

oracle 日期时间函数

摘要: ORACLE日期时间函数大全 TO_DATE格式(以时间:2007-11-02 13:45:25为例) Year: yy two digits 两位年 显示值:07 yyy three digits 三位年 显示值:007 yyyy four digits 四位年 显示值:2007 Month: m 阅读全文

posted @ 2017-09-21 17:59 cxhfuujust 阅读(808) 评论(0) 推荐(0) 编辑

Hiveserver2 OOM问题解法

摘要: 数据平台做一些计算需要通过hive jdbc方式连到hiveserver2执行job,但是hiveserver 正常运行一段时间后,总是会报如下OOM: 1 2 3 4 5 6 7 8 9 10 11 12 13 14 15 16 17 18 Hive history file=/tmp/work/ 阅读全文

posted @ 2017-09-21 14:07 cxhfuujust 阅读(3837) 评论(1) 推荐(0) 编辑

hiveserver 占用内存过大的问题

摘要: 今天为了求解hiveserver占用内存过大的问题,特地加了hive在apache的邮件列表,讨论半天。特别说的是 里面的人确实很热情啊 ,外国人做事确实很认真,讨论帖发的时候都狠详细。 粘出一些记录: 最上面 Alex发现一篇文章 append。。。。 今天改用jdk 7测试 情况基本一致,看来问 阅读全文

posted @ 2017-09-21 14:00 cxhfuujust 阅读(2826) 评论(0) 推荐(0) 编辑

linux查看CPU和内存使用情况

摘要: 在系统维护的过程中,随时可能有需要查看 CPU 使用率,并根据相应信息分析系统状况的需要。在 CentOS 中,可以通过 top 命令来查看 CPU 使用状况。运行 top 命令后,CPU 使用状态会以全屏的方式显示,并且会处在对话的模式 -- 用基于 top 的命令,可以控制显示方式等等。退出 t 阅读全文

posted @ 2017-09-21 11:05 cxhfuujust 阅读(268) 评论(0) 推荐(0) 编辑

2017年9月20日

linux Shell函数

摘要: Shell函数类似于Shell脚本,里面存放了一系列的指令,不过Shell的函数存在于内存,而不是硬盘文件,所以速度很快,另外,Shell还能对函数进行预处理,所以函数的启动比脚本更快。 1、函数定义 1 2 3 4 function 函数名() { 语句 [return] } 1 2 3 4 fu 阅读全文

posted @ 2017-09-20 12:36 cxhfuujust 阅读(249) 评论(0) 推荐(0) 编辑

linux 控制结构

摘要: 一.if 注: 格式1、格式2:一个条件一个命令; 格式3:一个条件两个命令; 格式4:两个条件三个命令,注意条件的写法。 例1: #!/bin/sh#ifTest#to show the method of if echo -e "Enter the first integer:\c"read F 阅读全文

posted @ 2017-09-20 12:35 cxhfuujust 阅读(277) 评论(0) 推荐(0) 编辑

linux 条件

摘要: 1.文件状态测试-d 目录 -r 可读-f 常规文件 -w 可写-L 符号连接 -x 可执行-s 文件长度大于0,非空 -u 文件有suid位设置 示例: [ -s haison.c ] 0表示成功,其他为失败 2.逻辑操作符 -a 逻辑与(and),操作符两边均为真,结果为真,否则为假。 -o 逻 阅读全文

posted @ 2017-09-20 10:13 cxhfuujust 阅读(174) 评论(0) 推荐(0) 编辑

linux 变量定义

摘要: 本地变量:用户自定义的变量。 环境变量:用于所有用户变量,用于用户进程前,必须用export命令导出。 位置变量:$0(脚本名),$1-$9:脚本参数。 特定变量:脚本运行时的一些相关信息。 $# 传递到脚本的参数个数$* 传递到脚本的参数,与位置变量不同,此选项参数可超过9个$$ 脚本运行时当前进 阅读全文

posted @ 2017-09-20 09:52 cxhfuujust 阅读(1313) 评论(1) 推荐(0) 编辑

2017年9月19日

hive array、map、struct使用

摘要: hive提供了复合数据类型:Structs: structs内部的数据可以通过DOT(.)来存取,例如,表中一列c的类型为STRUCT{a INT; b INT},我们可以通过c.a来访问域aMaps(K-V对):访问指定域可以通过["指定域名称"]进行,例如,一个Map M包含了一个group-》 阅读全文

posted @ 2017-09-19 20:07 cxhfuujust 阅读(278) 评论(0) 推荐(0) 编辑

Hive GenericUDF2

摘要: 再来看一个分数统计的小例子。 在Hive中存在如下一张表: [plain] view plain copy hive> describe tb_test2; OK name string score_list array<map<string,int>> Time taken: 0.074 seco 阅读全文

posted @ 2017-09-19 17:53 cxhfuujust 阅读(1012) 评论(3) 推荐(0) 编辑

导航