Hive的UDF是什么?
摘要:首先我们学习hadoop的时候,为了让我们不太会java语言但是对SQL很熟悉的工程师能够操作基本的mapreduce计算过程,Hive被设计出来了。Hive就好比是hadoop在执行MR(mapreduce)程序的一个操作系统,因为我们可以用简单的SQL语句去代替复杂的MR程序,因为Hive可以将
阅读全文
posted @
2018-05-24 16:44
duanxz
阅读(4490)
推荐(1) 编辑
Hive数据导入导出的几种方式
摘要:一,Hive数据导入的几种方式 首先列出讲述下面几种导入方式的数据和hive表。 导入: 导出: Hive表: 创建testA: 创建testB: 数据文件(sourceA.txt): 数据文件(sourceB.txt): (1)本地文件导入到Hive表 hive> LOAD DATA LOCAL
阅读全文
posted @
2018-05-09 18:24
duanxz
阅读(57648)
推荐(4) 编辑
如何做一个对账系统
摘要:业务知识 什么是对账 传统的对账就是核对账目,是指在会计核算中,为保证账簿记录正确可靠,对账簿中的有关数据进行检查和核对的工作。在银行或者第三方支付中,对账其实是对一定周期内的交易进行双方确认的过程,一般都是在第二天银行或者第三方支付公司对前一日交易进行清分,生成对账单供平台商户下载,并将应结算款结
阅读全文
posted @
2018-05-08 20:07
duanxz
阅读(3360)
推荐(1) 编辑
hive中的表
摘要:一、内部表与外部表的比较 Hive表概念和关系型数据库表概念差不多。在Hive里表会和HDFS的一个目录相对应,这个目录会存放表的数据。目录默认是/usr/hive/warehouse/。 比如你在hadoop09数据库创建了emp表,那么HDFS中就会有/user/hive/warehouse/h
阅读全文
posted @
2018-05-08 20:06
duanxz
阅读(2446)
推荐(0) 编辑