随笔分类 -  hive

linux架构
摘要:/dev 存放的是设备文件/boot 存放内核和启动文件相关的文件/home 存放用户的家目录/lib 系统库文件/bin 系统可执行文件/mnt 挂载外接设备/usr 一般存放安装程序/var 一般存放经常变化的数据,如服务数据,日志文件/etc 存放的Linux的软件和系统的配置文件/media... 阅读全文

posted @ 2014-04-16 11:02 追逐的脚步 阅读(117) 评论(0) 推荐(0)

HDFS的数据导入到HIVE中
摘要:hive的sql语句对hdfs上的任何的数据操作,其最终的处理都是通过hive的内置功能将这个类sql语句转化成mapreduce的框架进行处理。将hdfs额数据导入到hive 中,首先需要做到以下几步。1.hdfs中必须存在满足其hive格式的数据。(公司是使用oracle数据库作为源数据)2.建立一个hive表3.使用hive的导数据的语句。LOAD DATA INPATH '/' [OVERWRITE] INTO TABLE tablename;4.执行hive语句的分析。得到需要的数据,fangrlinux系统下的一个文件中。 阅读全文

posted @ 2014-04-11 16:35 追逐的脚步 阅读(960) 评论(0) 推荐(0)

导航