Apache Hive处理数据示例
摘要：继上一篇 "文章" 介绍如何使用Pig处理HDFS上的数据，本文将介绍使用Apache Hive进行数据查询和处理。 Apache Hive简介 首先Hive是一款数据仓库软件 使用HiveQL来结构化和查询存放的数据 执行环境：MapReduce, Tez, Spark 数据存放：HDFS, HB
阅读全文
posted @ 2017-02-22 23:36
02 2017 档案
Apache Pig处理数据示例
摘要：Apache Pig是一个高级过程语言，可以调用MapReduce查询大规模的半结构化数据集。 样例执行的环境为cloudera的单节点虚拟机 读取结构数据中的指定列 在hdfs上放置一个文件 启动Apache Pig 使用Pig Latin进行数据提取 其中dump的作用是将内容转存到屏幕。 将结
阅读全文
posted @ 2017-02-22 14:11
Oracle数据库死锁和MySQL死锁构造和比较
摘要：最近在复习数据库的事务隔离性，顺便构造了一下在Oracle上和MySQL上的死锁以比较异同。 在Oracle上面的实验 在Oracle中，因为是显式提交，所以默认可以认为在一个会话中若没有使用 进行提交，则可以认为在同一个事务里面 首先构造测试用表 开两个窗口形成死锁 同时这个过程中，可以在第三会话
阅读全文
posted @ 2017-02-17 00:45
