上一页 1 2 3 4 5 6 7 8 9 10 ··· 12 下一页
摘要: Hive 动态分区 Hive 参数 hive 参数、变量 hive当中的参数、变量,都是以命名空间开头 命名空间 读写权限 含义 hiveconf 可读写 hive-site.xml当中的各配置变量 例:hive --hiveconf hive.cli.print.header=true syste 阅读全文
posted @ 2020-08-04 17:00 shaoyayu 阅读(1770) 评论(1) 推荐(1) 编辑
摘要: Hive 函数 开发文档 1.内置运算符 1.1关系运算符 运算符 类型 说明 A = B 所有原始类型 如果A与B相等,返回TRUE,否则返回FALSE A == B 无 失败,因为无效的语法。 SQL使用”=”,不使用”==”。 A <> B 所有原始类型 如果A不等于B返回TRUE,否则返回F 阅读全文
posted @ 2020-08-04 16:54 shaoyayu 阅读(164) 评论(0) 推荐(0) 编辑
摘要: Hive DML 删除表中的数据: truncate table table_name 删除表的数据 从查询将数据插入Hive表 可以使用insert子句将查询结果插入表中。 Hive extension (multiple inserts): FROM from_statement INSERT 阅读全文
posted @ 2020-08-04 16:51 shaoyayu 阅读(102) 评论(0) 推荐(0) 编辑
摘要: HIVE分区 简单分区 hive> CREATE TABLE psn_2( > id int, > name string, > likes array<string>, > address map<string,string> > ) > PARTITIONED BY (age int) > RO 阅读全文
posted @ 2020-08-04 16:46 shaoyayu 阅读(363) 评论(0) 推荐(0) 编辑
摘要: HIVE的入门 https://cwiki.apache.org/confluence/display/Hive/LanguageManual+DDL 创建/删除/更改/使用数据库 创建数据库 CREATE (DATABASE|SCHEMA) [IF NOT EXISTS] database_nam 阅读全文
posted @ 2020-08-04 16:44 shaoyayu 阅读(239) 评论(0) 推荐(0) 编辑
摘要: Hive的搭建环境 自己必须搭建好hdfs集群和mysql环境 MYSQL的安装配置 yum安装Mysql 如果你的yum数据源里面没有找到mysql-server 请下载安装MYSQL的数据源 $ wget http://repo.mysql.com/mysql-community-release 阅读全文
posted @ 2020-08-04 16:43 shaoyayu 阅读(397) 评论(0) 推荐(0) 编辑
摘要: Hive基础 看了好多文章,还是觉得这个up写的我个人好理解点 转载地址:https://www.cnblogs.com/qingyunzong/p/8707885.html Hive 简介 什么是Hive 1、Hive 由 Facebook 实现并开源 2、是基于 Hadoop 的一个数据仓库工具 阅读全文
posted @ 2020-08-04 16:32 shaoyayu 阅读(238) 评论(0) 推荐(0) 编辑
摘要: TFIDF 案列 概念 TF-IDF(term frequency–inverse document frequency)是一种用于资讯检索与资讯探勘的常用加权技术。 TF-IDF是一种统计方法,用以评估一字词对于一个文件集或一个语料库中的其中一份文件的重要程度。 字词的重要性随着它在文件中出现的次 阅读全文
posted @ 2020-08-04 16:28 shaoyayu 阅读(170) 评论(0) 推荐(0) 编辑
摘要: PageRank案列 什么是pagerank PageRank是Google提出的算法,用于衡量特定网页相对于搜索引擎索弓中的其他网页而言的重要程度。 是Google创始人拉里佩奇和谢尔盖布林于1997年创造的 PageRank实现了将链接价值概念作为排名因素。 计算环境 Hadoop-2.5.2 阅读全文
posted @ 2020-08-04 16:26 shaoyayu 阅读(224) 评论(0) 推荐(0) 编辑
摘要: MapReduce好友推荐案例 好友序列 tom hello hadoop cat world hadoop hello hive cat tom hive mr hive hello hive cat hadoop world hello mr hadoop tom hive world hell 阅读全文
posted @ 2020-08-04 16:23 shaoyayu 阅读(250) 评论(0) 推荐(0) 编辑
上一页 1 2 3 4 5 6 7 8 9 10 ··· 12 下一页