上一页 1 ··· 315 316 317 318 319 320 321 322 323 ··· 376 下一页
摘要: https://cwiki.apache.org/confluence/display/Hive/LanguageManual+Select 查询语句语法: [WITH CommonTableExpression (, CommonTableExpression)*] (Note: Only ava 阅读全文
posted @ 2020-07-22 20:40 秋华 阅读(870) 评论(0) 推荐(0) 编辑
摘要: 1 数据导入 1.1 向表中装载数据(Load) 1.语法 hive> load data [local] inpath '/opt/module/datas/student.txt' [overwrite] into table student [partition (partcol1=val1, 阅读全文
posted @ 2020-07-22 19:00 秋华 阅读(468) 评论(0) 推荐(0) 编辑
摘要: 1 创建数据库 CREATE DATABASE [IF NOT EXISTS] database_name [COMMENT database_comment] [LOCATION hdfs_path] [WITH DBPROPERTIES (property_name=property_value 阅读全文
posted @ 2020-07-22 16:41 秋华 阅读(567) 评论(0) 推荐(0) 编辑
摘要: 1 基本数据类型 对于 Hive 的 String 类型相当于数据库的 varchar 类型,该类型是一个可变的字符串,不过它不能声明其中最多能存储多少个字符,理论上它可以存储 2GB 的字符数。 2 集合数据类型 Hive 有三种复杂数据类型 ARRAY、MAP 和 STRUCT。ARRAY 和 阅读全文
posted @ 2020-07-22 16:38 秋华 阅读(3628) 评论(0) 推荐(0) 编辑
摘要: 6 启动Hive 6.1 初始化元数据库 1)登陆MySQL [atguigu@hadoop102 software]$ mysql -uroot -p000000 2)新建Hive元数据库 mysql> create database metastore; mysql> quit; 3)初始化Hi 阅读全文
posted @ 2020-07-22 15:10 秋华 阅读(313) 评论(0) 推荐(0) 编辑
摘要: 1 Hive安装地址 1)Hive官网地址 http://hive.apache.org/ 2)文档查看地址 https://cwiki.apache.org/confluence/display/Hive/GettingStarted 3)下载地址 http://archive.apache.or 阅读全文
posted @ 2020-07-22 11:45 秋华 阅读(346) 评论(0) 推荐(0) 编辑
摘要: 1 什么是 Hive Hive:由 Facebook 开源用于解决海量结构化日志的数据统计。 Hive 是基于 Hadoop 的一个数据仓库工具,可以将结构化的数据文件映射为一张表,并提供类 SQL 查询功能 本质是:将 HQL 转化成 MapReduce 程序 1)Hive 处理的数据存储在 HD 阅读全文
posted @ 2020-07-22 11:06 秋华 阅读(402) 评论(0) 推荐(0) 编辑
摘要: 1 YARN-HA 工作机制 1. 官方文档: http://hadoop.apache.org/docs/r2.7.2/hadoop-yarn/hadoop-yarn-site/ResourceManagerHA.html 2. YARN-HA 工作机制,如图 3-23 所示 2 配置 YARN- 阅读全文
posted @ 2020-07-21 15:51 秋华 阅读(362) 评论(0) 推荐(0) 编辑
摘要: 1 环境准备 1. 修改 IP 2. 修改主机名及主机名和 IP 地址的映射 3. 关闭防火墙 4. ssh 免密登录 5. 安装 JDK,配置环境变量等 2 规划集群 3 配置 Zookeeper 集群 1. 集群规划 在 hadoop102、hadoop103 和 hadoop104 三个节点上 阅读全文
posted @ 2020-07-21 15:27 秋华 阅读(237) 评论(0) 推荐(0) 编辑
摘要: 1 HA 概述 1)所谓 HA(High Available),即高可用(7*24 小时不中断服务)。 2)实现高可用最关键的策略是消除单点故障。HA 严格来说应该分成各个组件的 HA 机制: HDFS 的 HA 和 YARN 的 HA。 3)Hadoop2.0 之前,在 HDFS 集群中 Name 阅读全文
posted @ 2020-07-21 12:33 秋华 阅读(206) 评论(0) 推荐(0) 编辑
上一页 1 ··· 315 316 317 318 319 320 321 322 323 ··· 376 下一页