摘要:
docker 镜像网址 https://hub.docker.com/search?q=&type=image https://hub.docker.com/ 后续 阅读全文
摘要:
xxx docker 安装 clickhouse单机版 默认已经安装好Docker, 尚未安装docker的可以参考这篇: Ubuntu安装Docker 直接运行, docker会自动帮你拉取镜像: docker run -d --name ch-server --ulimit nofile=262 阅读全文
摘要:
Docker-compose 常用命令 https://blog.csdn.net/qq_42267173/article/details/124687804 文档地址: 官方文档:https://docs.docker.com/compose/reference/overview/ docker- 阅读全文
摘要:
Docker 部署 Mysql 8.0 并设置数据持久化 创建目录 创建 my.cnf 文件 创建初始化 SQL 脚本 启动 Mysql 容器 方法1:docker run 方法2:docker-compose 远程连接数据库测试 创建目录 创建项目目录 mkdir -p /home/workspa 阅读全文
摘要:
DataEase DataEase 的技术栈 前端:Vue.js、Element 图库:Apache ECharts、AntV 后端:Spring Boot 中间件:MySQL 数据处理:Kettle、Apache Doris 基础设施:Docker 快速开始 在线体验 环境地址:https://d 阅读全文
摘要:
spark参数调优 1.num-executors 参数说明:该参数用于设置Spark作业总共要用多少个Executor进程来执行。Driver在向YARN集群管理器申请资源时,YARN集群管理器会尽可能按照你的设置来在集群的各个工作节点上,启动相应数量的Executor进程。这个参数非常之重要,如 阅读全文
摘要:
Flink性能调优 1、资源配置调优 Flink性能调优的第一步,就是为任务分配合适的资源,在一定范围内,增加资源的分配与性能的提升是成正比的,实现了最优的资源配置后,在此基础上再考虑进行后面论述的性能调优策略。 提交方式主要是yarn-per-job,资源的分配在使用脚本提交Flink任务时进 阅读全文
摘要:
Mongo Spark Connector Spark SQL The following code snippets can be found in SparkSQL.scala. Prerequisites Have MongoDB up and running and Spark 2.2.x 阅读全文
摘要:
Presto、Spark SQL、Hive的比较 1.Presto Presto只有计算分析能力但可以连接多种数据源,包括Hive,Oracle,MySQL,Kafka,MongoDB,Redis等,并且可以将多个不同数据源进行联合分析。可以通过show catalogs 命令看到Presto连接的 阅读全文
摘要:
大数据常用软件安装指南 为方便大家查阅,本仓库所有软件的安装方式单独整理如下: 一、基础软件安装 Linux 环境下 JDK 安装 Linux 环境下 Python 安装 虚拟机静态 IP 及多 IP 配置 二、Hadoop Hadoop 单机环境搭建 Hadoop 集群环境搭建 基于 Zookee 阅读全文