AI晓

摘要： 1.获取kibana安装包，解压，进入目录 2.修改kibana.yml配置文件 3.启动验证 注意：未安装x-pack插件的kibana只具有基本功能，Monitoring、Graph等功能不能使用。 4.安装x-pack 3.重新启动验证 输入用户密码登录即可 阅读全文

摘要： 1.安装nodejs（如果已经安装过，此步可省略） 2.安装elasticsearch-head插件 3.修改elasticsearch.yml配置文件，重启elasticsearch 4.登录elasticsearch-head插件界面 登录有两种情况： elasticsearch未安装x-pac 阅读全文

摘要： 安装环境：cendos7.2 角色分配：本次安装节点为3个（不同机器），采用下图左侧方案 1.安装jdk1.8 参考： http://www.cnblogs.com/libin2015/p/8086047.html 2.添加elasticsearch用户并修改密码 useradd elasticse 阅读全文

摘要： linux平台下安装jdk rpm安装 1.官网下载rpm包 官网rpm下载地址： http://www.oracle.com/technetwork/java/javase/downloads/jdk8-downloads-2133151.html 2.rpm安装 rpm -ivh jdk-8u1 阅读全文

摘要： .file->new -> project 2.选择Maven，添加模板创建项目 3.填写Groupid、ArtifactId信息。GroupId：com.公司名称/个人名称.项目名；ArtifactId：子项目名称 4.选择本地安装的maven和setting.xml文件 5.工程名称和路径 6. 阅读全文

摘要： EXPORT 命令导出数据表或分区，与元数据一起输出到指定位置。又可以从这个输出位置移动到不同的Hadoop 或Hive 实例中，并且使用IMPORT 命令导入。 当导出一个分区表时，原始数据可能位于不同的HDFS位置，同时还支持导出/导入分区的子集。 导出的元数据存储在目标目录中，数据文件则存储在 阅读全文

摘要： 实例： 建立外部表： CREATE EXTERNAL TABLE `trojan_controller`( `key` string COMMENT 'key', `src` string COMMENT '', `src_type` string COMMENT '', `e_detail_typ 阅读全文

摘要： 简介： Hive 是一个基于 Hadoop 文件系统之上的数据仓库架构。它为数据仓库的管理提供了许多功能：数据 ETL （抽取、转换和加载）工具、数据存储管理和大型数据集的查询和分析能力。同时 Hive 还定义了类 SQL的语言 -- Hive QL. Hive QL 允许用户进行和 SQL 相似的 阅读全文

摘要： 区分大小写 - Scala是大小写敏感的，这意味着标识Hello 和 hello在Scala中会有不同的含义。 类名 - 对于所有的类名的第一个字母要大写。如果需要使用几个单词来构成一个类的名称，每个单词的第一个字母要大写。示例：class MyFirstScalaClass 方法名称 - 所有的方 阅读全文

摘要： Spark2.x 引入了很多优秀特性，性能上有较大提升，API 更易用。在“编程统一”方面非常惊艳，实现了离线计算和流计算 API 的统一，实现了 Spark sql 和 Hive Sql 操作 API 的统一。Spark 2.x 基本上是基于 Spark 1.x 进行了更多的功能和模块的扩展，及性 阅读全文