随笔分类 - [Java]:Hadoop/Hbase/Hive/Spark/Flink/Hue/Cdh/BI
大数据UI工具Hue、CDH
Hue 先安装必需组件
摘要:1、启动 2、ZK客户端 3、springboot+hbase实例 1)、pom <dependencies> <dependency> <groupId>org.springframework.boot</groupId> <artifactId>spring-boot-starter-web</
阅读全文
摘要:Recs FlinkCommodityRecommendationSystem(基于 Flink 的商品推荐系统) 1. 前言 系统取名为 Recs,灵感源于 Recommendation System。logo 使用在线 logo 网站制作。作者开发该项目,是为了学习 Flink 以及相关大数据中
阅读全文
摘要:目录 一、什么是数据集成? 二、ETL 又是什么? 三、SeaTunnel 介绍 1)概述 2)SeaTunnel 的作用 3)SeaTunnel 的特点 4)Seatunnel 优势与缺点 5)核心理念 四、架构演进 五、相关竞品及对比 六、SeaTunnel 部署和简单使用 1)安装 JDK 2
阅读全文
摘要:https://www.51doit.com/archives/1166.html
阅读全文
摘要:1、pom.xml <dependencies> <dependency> <groupId>org.springframework.boot</groupId> <artifactId>spring-boot-starter</artifactId> </dependency> <dependen
阅读全文
摘要:1、pom.xml <dependency> <groupId>org.apache.spark</groupId> <artifactId>spark-core_2.11</artifactId> <version>1.6.0</version> <exclusions> <exclusion>
阅读全文
摘要:一.IDEA装驱动: 1.下载一个MySQL的JDBC驱动:mysql-connector-java-5.1.44.tar.gz2.在idea Open Moudle Settings 在 Moudle中 选Dependencies + JDC驱动的解压位置 选(mysql-connector-ja
阅读全文
摘要:1、pom.xml <dependency> <groupId>org.springframework.boot</groupId> <artifactId>spring-boot-starter</artifactId> </dependency> <dependency> <groupId>or
阅读全文
摘要:spark解析aa.txt 1、aa.txt 2、pom.xml <dependency> <groupId>org.apache.spark</groupId> <artifactId>spark-core_2.11</artifactId> <version>2.1.1</version> <e
阅读全文
摘要:1、spark安装 http://archive.apache.org/dist/spark/spark-2.2.0/spark-2.2.0-bin-hadoop2.7.tgz 环境变量: 创建SPARK_HOME:D:\spark-2.2.0-bin-hadoop2.7 Path添加:%SPARK
阅读全文
摘要:1、pom.xml <properties> <java.version>1.8</java.version> <project.build.sourceEncoding>UTF-8</project.build.sourceEncoding> <project.reporting.outputEn
阅读全文
摘要:1、mysql数据库test 2、kafka创建主题student 3、pom.xml <properties> <java.version>1.8</java.version> <project.build.sourceEncoding>UTF-8</project.build.sourceEnc
阅读全文
摘要:1、pom.xml <dependencies> <dependency> <groupId>org.springframework.boot</groupId> <artifactId>spring-boot-starter-web</artifactId> </dependency> <depe
阅读全文
摘要:1.官方下载地址 https://flink.apache.org/zh/downloads.html#apache-flink-1144 最好用国内镜像下载比较快 下载后对压缩包解压,路径自定义 2.安装包中是不含启动bat的,需要我们新建 flink.bat 1 2 3 4 5 6 7 8 9
阅读全文