摘要: **机器:**24.47.155.14 / 24.47.155.15 **需求:**将24.47.155.15 的 /data 目录挂载到 24.47.155.14 的 /data上 1、安装nfs工具(两台) yum install nfs-utils 2、开启nfs服务(两台) # 查看服务状态 阅读全文
posted @ 2023-03-15 18:20 Leil_blogs 阅读(115) 评论(0) 推荐(0) 编辑
摘要: 环境准备:一主一从,安装的 k8s 版本为 1.18.6 | 角色 | 地址 | 主机名 | | | | | | 主节点master | 192.168.10.51 | node1 | | 从节点 | 192.168.10.52 | node2 | ```shell ### 以下操作在集群所有节点都 阅读全文
posted @ 2022-11-08 17:31 Leil_blogs 阅读(1169) 评论(0) 推荐(0) 编辑
摘要: **TipDM 简介:**TipDM建模平台,是由广东泰迪智能科技股份有限公司研发并开源的数据挖掘工具,TipDM建模平台提供数据丰富的数据预处理、 数据分析与数据挖掘组件,帮助广大中小企业快速建立数据挖掘工程,提升数据处理的效能。 GitHub:https://github.com/GZTipDM 阅读全文
posted @ 2022-11-08 17:21 Leil_blogs 阅读(703) 评论(0) 推荐(0) 编辑
摘要: 1、安装docker # 安装工具 sudo yum install -y yum-utils # 添加yum仓库配置 sudo yum-config-manager --add-repo https://download.docker.com/linux/centos/docker-ce.repo 阅读全文
posted @ 2022-11-02 15:50 Leil_blogs 阅读(988) 评论(0) 推荐(0) 编辑
摘要: 1、问题 ambari中发现HBase master挂掉,重启之后过了几秒master又挂掉,去HBase日志目录查看master日志报错: HBase:File system needs to be upgraded. You have version null and I want versio 阅读全文
posted @ 2022-04-20 10:40 Leil_blogs 阅读(187) 评论(0) 推荐(0) 编辑
摘要: 1、需求 内网且不连接外网的情况下使系统平台满足 安全传输(http-https协议) 2、生成证书 编写脚本 vim gen-ssl.sh 将脚本内容粘贴,wq保存退出 #!/bin/sh # create self-signed server certificate: read -p "Ente 阅读全文
posted @ 2022-04-13 09:34 Leil_blogs 阅读(1085) 评论(0) 推荐(0) 编辑
摘要: 1、MapReduce相比Spark 1)MapReduce 编程模型表达能力弱,只有map和reduce(map-shuffle-reduce)、难以实现复杂的数据操作 处理流程固定,难以实现迭代式计算 数据基于磁盘进行传递,效率较低 2)Spark 抽象出RDD的数据结构,DAG图组合数据处理操 阅读全文
posted @ 2022-01-10 09:26 Leil_blogs 阅读(56) 评论(0) 推荐(0) 编辑
摘要: 1、导入依赖 <!-- https://mvnrepository.com/artifact/com.gilt.flume/logback-flume-appender --> <dependency> <groupId>com.gilt.flume</groupId> <artifactId>lo 阅读全文
posted @ 2021-10-12 18:01 Leil_blogs 阅读(361) 评论(0) 推荐(0) 编辑
摘要: 1、版本问题 HSSFWorkbook操作Excel2003及以前版本,扩展名是.xls XSSFWorkbook操作Excel2007及以后的版本,扩展名是.xlsx 2、判断单元格是否为空 判断单元格对象是否为空且内容是否为空字符串: /** * 判断单元格是否为空,true为空 * * @pa 阅读全文
posted @ 2021-10-08 17:37 Leil_blogs 阅读(366) 评论(0) 推荐(0) 编辑
摘要: 1、Hive 1)driver org.apache.hive.jdbc.HiveDriver 2)url jdbc:hive2://<ip>:<端口>/<数据库> 3)查询所有库 show databases 4)查询所有表 show tables 2、MySQL 1)driver com.mys 阅读全文
posted @ 2021-09-16 17:06 Leil_blogs 阅读(628) 评论(0) 推荐(0) 编辑