摘要: Hive函数 系统自带的函数 查看系统自带的函数 查看系统自带的函数 显示自带的函数的用法 详细显示自带的函数的用法 自定义函数描述 描述 当Hive提供的内置函数无法满足你的业务处理需要时,此时就可以考虑使用用户自定义函数(UDF:user defined function),详情请查看: "官网 阅读全文
posted @ 2018-05-31 22:33 Lil-K 阅读(1984) 评论(0) 推荐(0) 编辑
摘要: Java,python操作Hbase <! TOC "操作Hbase" "python操作Hbase" "安装Thrift之前所需准备" "安装Thrift" "产生针对Python的Hbase的API" "启动Thrift服务" "执行python文件,对hbase进行操作" "模块存放位置" " 阅读全文
posted @ 2018-05-30 11:45 Lil-K 阅读(511) 评论(0) 推荐(0) 编辑
摘要: 1. Hive基础 <! TOC "1. Hive基础" "Hive基本概念" "引入原因:" "Hive是什么" "Hive数据管理" "四种数据模型" "Hive内部表和外部表" "Hive数据类型" "Hive的优化" "Map的优化:" "Reduce 的优化" "一个Reduce:" "分 阅读全文
posted @ 2018-05-28 22:07 Lil-K 阅读(525) 评论(0) 推荐(0) 编辑
摘要: storm安装部署 解压storm安装包 $ tar zxvf apache storm 1.1.0.tar.gz C /usr/local/src 修改解压后的apache storm 1.1.0.tar.gz文件名称为storm 1.1.0 $ mv apache storm 1.1.0 sto 阅读全文
posted @ 2018-05-22 23:58 Lil-K 阅读(152) 评论(0) 推荐(0) 编辑
摘要: Thrift安装部署 <! TOC "Thrift安装部署" "下载源码包" "安装g++" "解压Thrift安装包" "安装boost开发工具" "测试(python版)" <! /TOC 下载源码包 安装g++ centos: 如果没有安装g++,无法编译 解压Thrift安装包 安装boos 阅读全文
posted @ 2018-05-22 23:52 Lil-K 阅读(304) 评论(0) 推荐(0) 编辑
摘要: 此笔记仅用于作者记录复习使用,如有错误地方欢迎留言指正,作者感激不尽,如有转载请指明出处 Hbase环境搭建 <! TOC "Hbase环境搭建" "hadoop为HA的Hbase配置" "Zookeeper集群的正常部署并启动" "Hadoop集群的正常部署并启动" "解压HBase" "修改HB 阅读全文
posted @ 2018-05-22 09:47 Lil-K 阅读(142) 评论(0) 推荐(0) 编辑
摘要: 此笔记仅用于作者记录复习使用,如有错误地方欢迎留言指正,作者感激不尽,如有转载请指明出处 Hbase基础 <! TOC "Hbase基础" "Hbase定义" "行存储 v s 列存储" "Hbase数据模型" "Hbase物理模型" "Hbase系统架构" "Hbase的容错" "Hbase特殊的 阅读全文
posted @ 2018-05-21 22:03 Lil-K 阅读(150) 评论(0) 推荐(0) 编辑
摘要: kafka概述 1. Apache Kafka是一个开源 消息 系统,由Scala写成。是由Apache软件基金会开发的一个开源消息系统项目。 2. Kafka最初是由LinkedIn开发,并于2011年初开源。2012年10月从Apache Incubator毕业。该项目的目标是为处理实时数据提供 阅读全文
posted @ 2018-05-16 18:33 Lil-K 阅读(192) 评论(0) 推荐(0) 编辑
摘要: 安装zookeeper 1. 安装jdk(此处省略) 2. 解压tar包并配置变量环境 配置文件修改 1. 将/usr/local/src/zookeeper 3.4.5/conf这个路径下的zoo_sample.cfg重命名为zoo.cfg 2. 进入zoo.cfg文件:vim zoo.cfg 3 阅读全文
posted @ 2018-05-09 16:36 Lil-K 阅读(100) 评论(0) 推荐(0) 编辑
摘要: VSCode插件整理 VSCode插件整理 官网地址 vscode常用配置(User Settings文件) 基本插件 前端插件 VUE部分 python MarkDown部分 连接Linux 本地与博客园xmlrpc插件 官网地址 官网地址 vscode常用配置(User Settings文件) 阅读全文
posted @ 2018-05-07 08:39 Lil-K 阅读(2032) 评论(0) 推荐(1) 编辑