摘要: 错误提示:bad interpreter: No such file or directory: /bin/sh错误分析:因为操作系统是windows,在windows下编辑的脚本,所以有可能有不可见字符。解决办法:首先要确保文件有可执行权限#chmod a+x filename然后修改文件格式#v 阅读全文
posted @ 2018-05-18 09:49 夕阳下的无名草 阅读(1534) 评论(0) 推荐(0) 编辑
摘要: Hive中日期函数总结:1.时间戳函数日期转时间戳:从1970-01-01 00:00:00 UTC到指定时间的秒数select unix_timestamp(); --获得当前时区的UNIX时间戳select unix_timestamp('2017-09-15 14:23:00'); selec 阅读全文
posted @ 2018-04-18 16:36 夕阳下的无名草 阅读(250) 评论(0) 推荐(0) 编辑
摘要: (1)in 不支持子查询 eg. select * from src where key in(select key from test);支持查询个数 eg. select * from src where key in(1,2,3,4,5);in 40000个 耗时25.766秒in 80000 阅读全文
posted @ 2018-04-16 17:17 夕阳下的无名草 阅读(1306) 评论(0) 推荐(0) 编辑
摘要: 一、关系运算: 1. 等值比较: = 语法:A=B 操作类型:所有基本类型 描述:如果表达式A与表达式B相等,则为TRUE;否则为FALSE 举例: hive>select 1 from lxw_dual where 1=1; 1 2. 不等值比较: <> 语法: A <> B 操作类型:所有基本类 阅读全文
posted @ 2018-03-28 19:23 夕阳下的无名草 阅读(177) 评论(0) 推荐(0) 编辑
摘要: SparkSQL与Hive on Spark的比较 简要介绍了SparkSQL与Hive on Spark的区别与联系 简要介绍了SparkSQL与Hive on Spark的区别与联系 一、关于Spark 简介 在Hadoop的整个生态系统中,Spark和MapReduce在同一个层级,即主要解决 阅读全文
posted @ 2018-03-18 21:29 夕阳下的无名草 阅读(601) 评论(0) 推荐(0) 编辑
摘要: 今天在安装hadoop完成测试创建用户目录失败在网上找到了原因记录一下原文地址 http://blog.csdn.net/l1028386804/article/details/51538611 配置完hadoop启动运行的时候出现如下警告信息: 问题在哪里?有人说这是hadoop的预编译包是32b 阅读全文
posted @ 2018-03-18 18:36 夕阳下的无名草 阅读(462) 评论(0) 推荐(0) 编辑
摘要: .centos7版本对防火墙进行 加强,不再使用原来的iptables,启用firewall 1.查看已开放的端口(默认不开放任何端口) firewall-cmd --list-ports 2.开启80端口 firewall-cmd --zone=public(作用域) --add-port=80/ 阅读全文
posted @ 2018-03-16 14:51 夕阳下的无名草 阅读(266) 评论(0) 推荐(0) 编辑
摘要: 运行hadoop [root@hadoop0 ~]# start-all.sh 进入命令行[root@hadoop0 ~]# hive 查询昨天的表 hive> select * from stu; 显示数据库 hive> show databases 创建数据库 hive> create data 阅读全文
posted @ 2018-03-14 12:10 夕阳下的无名草 阅读(217) 评论(0) 推荐(0) 编辑
摘要: SPOOL 命令使用实例【oracle导出纯文本格式文件】 SET echo off --在用start命令执行一个sql脚本时,是否显示脚本中正在执行的SQL语句; SET feedback off --是否回显本次sql命令处理的记录条数,缺省为on; SET heading off --是否显 阅读全文
posted @ 2018-03-12 17:23 夕阳下的无名草 阅读(4828) 评论(0) 推荐(0) 编辑
摘要: distinct :必须放在开头去重复。 declare :声明变量 一般是用在函数和存储过程中的.。 substr(string ,1,3) : 函数解读:取string 中重左往右取3字长的字符串。 层次化查询,即树型结构查询,是SQL中经常用到的功能之一,通常由根节点,父节点,子节点,叶节点组 阅读全文
posted @ 2018-03-12 16:19 夕阳下的无名草 阅读(235) 评论(0) 推荐(0) 编辑