百衲本 - 博客园

2023年2月17日

摘要：一、数据迁移使用场景 1.冷热集群数据同步、分类存储 2.整体数据整体搬迁 3.数据准实时同步(备份) 二、考量因素 1.网络传输带宽及时间，是否会影响现有业务 2.性能，单机？多线程？分布式？ 3.是否正常增量同步 4.数据迁移的同步性(同步单位时间数据超过单位时间) 三、DistCp工具使用 3 阅读全文

posted @ 2023-02-17 15:03 百衲本阅读(1080) 评论(0) 推荐(0) 编辑

centos7二进制安装Hadoop3

摘要：一、Hadoop 简介 1.1 Hadoop3核心组件 HDFS：分布式文件系统：解决海量数据存储 YARN：集群资源管理和任务调度框架：解决资源任务调度 MapReduce：分布式计算框架：解决海量数据计算 1.2 Hadoop集群简介 Hadoop集群包括两个集群：HDFS YARN 两个集群阅读全文

posted @ 2023-02-17 14:52 百衲本阅读(47) 评论(0) 推荐(0) 编辑

centos7编译安装Hadoop3

摘要：一、安装编译相关依赖此篇文档及Hadoop相关文档相关软件包统一在此百度网盘：链接：https://pan.baidu.com/s/11F4THdIfgrULMn2gNcObRA?pwd=cjll yum install snappy snappy-devel bzip2 bzip2-devel 阅读全文

posted @ 2023-02-17 14:26 百衲本阅读(69) 评论(0) 推荐(0) 编辑

2023年2月14日

jumpserver API调试

摘要：一、获取认证token 由于我是docker，这里我只演示docker方式，其他方式类似 docker exec -it jms_core /bin/bash #进入core 服务 cd /opt/jumpserver/apps python manage.py shell from users.m 阅读全文

posted @ 2023-02-14 16:20 百衲本阅读(797) 评论(0) 推荐(0) 编辑

2023年2月13日

k8s安装YAPI

摘要：一、前置条件提前安装MongoDB 二、YAML文件 namespace 自行替换 Deployment.yaml apiVersion: apps/v1 kind: Deployment metadata: name: yapi namespace: ops-share labels: app: 阅读全文

posted @ 2023-02-13 10:44 百衲本阅读(194) 评论(0) 推荐(0) 编辑

2023年2月11日

jenkins学习笔记之四：jenkins常用pipline DSL方法

摘要：一、Json数据格式化(readJSON) # 建议使用def response = readJSON text: "${scanResult}" println(scanResult) //以下为原生方法。不建议使用 import groovy.json.* @NonCPS def GetJson 阅读全文

posted @ 2023-02-11 19:18 百衲本阅读(305) 评论(1) 推荐(0) 编辑

jenkins学习笔记之三：使用jenkins共享库实现日志格式化输出

摘要：一、添加AnsiColor插件二、查看插件语法 1.打开任意pipline项目配置，找到流水线语法，并点击跳转连接，选择插件，查看帮助三、修改sharelibrary脚本,优化打印方法 package org.devops //格式化输出 def PrintMes(value,color){ 阅读全文

posted @ 2023-02-11 17:33 百衲本阅读(547) 评论(0) 推荐(0) 编辑

jenkins学习笔记之二：jenkins共享库(ShareLibrary)

摘要：一、目录结构共享库的目录结构如下: (root) +- src # Groovy source files | +- org | +- foo | +- Bar.groovy # for org.foo.Bar class +- vars | +- foo.groovy # for global 阅读全文

posted @ 2023-02-11 17:00 百衲本阅读(1417) 评论(0) 推荐(0) 编辑

2023年2月7日

jenkins学习笔记之一：流水线基础语法

摘要：一、Pipeline概念 1 node/agent(节点) 节点是一个机器，可以是Jenkins的master节点也可以是slave节点。通过node指定当前job运行的机器（这个是脚本式语法）。参数: . any 在任何可用的节点上执行pipeline。 . none 没有指定agent的时候默阅读全文

posted @ 2023-02-07 23:11 百衲本阅读(580) 评论(0) 推荐(0) 编辑

2023年2月3日

手动部署JumpServer

摘要：一、环境配置 [root@sdp-dev ~]# getenforce Disabled [root@sdp-dev ~]# systemctl stop firewalld.service # 修改字符集，否则可能报 input/output error的问题，因为日志里打印了中文 [root@s 阅读全文

posted @ 2023-02-03 16:46 百衲本阅读(162) 评论(0) 推荐(0) 编辑

docker部署jumpserver及入门

摘要：一、环境及要求环境：CentOS Linux 7.9 jumpserver v2.28.6 要求 Linux Kernel: >= 4.0 MySQL: >= 5.7 #官方使用MariaDB 10.6 对照MySQL8.0 Redis: >= 5.0 #不支持cluster模式官方使用Redi 阅读全文

posted @ 2023-02-03 16:44 百衲本阅读(1246) 评论(0) 推荐(0) 编辑

2023年2月1日

Java连接Mysql SSL初始化失败

摘要：连接Mysql时报javax.net.ssl.SSLHandshakeException No appropriate protocol (protocol is disabled or cipher suites are inappropriate)错误报错如下 [RX2]-ERROR-[202 阅读全文

posted @ 2023-02-01 17:15 百衲本阅读(204) 评论(0) 推荐(0) 编辑

yum安装指定版本的openJDK

摘要：一、前言 JDK的奇数版本和偶数版本有什么区别每次去Oracle官网去下载JDK，就会发现有两个版本，一个基数版本，一个偶数版本。比如最新的jdk-8u321和jdk-8u322。这是咋回事？这是官方对于奇数版本与偶数版本区别的解释：从JDK版本7u71以后，JAVA将会在同一时间发布两个版本阅读全文

posted @ 2023-02-01 11:42 百衲本阅读(962) 评论(0) 推荐(0) 编辑

2023年1月28日

阿里云OSS操作

摘要：一、阿里云OSS API常用操作 1.上传文件 1.1 小文件上传(小于5GB) #!/usr/bin/python3 # -*- coding: utf-8 -*- import oss2 import os import sys oss_file_name=sys.argv[1] local_f 阅读全文

posted @ 2023-01-28 17:04 百衲本阅读(343) 评论(0) 推荐(0) 编辑

2023年1月6日

configmap出现/n问题解决

摘要： 1.现象原始文件肉眼显示正常，如下图命令行显示整个data部分成了一坨，回车全变成了/n,虽然不影响使用，但是对维护查看比较麻烦，如下图 2. 问题原因 1.配置文件里有一些Tab而不是四个空格(K8S的yaml文件只允许有空格)2.空格是WIN系统类型的空格结尾 3.解决方法 #将每行以一个或阅读全文

posted @ 2023-01-06 16:28 百衲本阅读(574) 评论(0) 推荐(0) 编辑

2022年12月22日

centos7通过Ambari2.74部署Hadoop

摘要：一、前言服务器：建议第一台内存不少于16G，其他可以8G 软件版本：资源链接：链接：https://pan.baidu.com/s/17GWF0opxYl0MIm2LJNUGRg?pwd=iq4l 提取码：iq4l 二、部署前环境准备以下操作在所有机器上执行 1.配置host解析 vim / 阅读全文

posted @ 2022-12-22 16:57 百衲本阅读(475) 评论(0) 推荐(0) 编辑

2022年12月12日

使用Git LFS托管大文件

摘要：一、安装 #当前操作系统为centos7 [root@localhost ~]#curl -s https://packagecloud.io/install/repositories/github/git-lfs/script.rpm.sh | sudo bash [root@localhost 阅读全文

posted @ 2022-12-12 10:35 百衲本阅读(492) 评论(0) 推荐(0) 编辑

2022年11月29日

docker部署RockerMQ单机测试环境

摘要： 1.RocketMQ创建专属网络 [root@mq011 ~]# docker network create rocketmq 154dc65dce84ce5d417e9e2787bdd77de881ac65575e5e74fed4aeaf99830984 [root@mq011 ~]# docke 阅读全文

posted @ 2022-11-29 15:02 百衲本阅读(209) 评论(0) 推荐(0) 编辑

2022年11月9日

创建阿里云镜像仓库imagePullSecrets

摘要：一、通过docker config.json 1.docker登录仓库，根据提示 [root@ks-node05 ~]# docker login --username=mq-ops2@1910650714221478 registry-vpc.cn-hangzhou.aliyuncs.com #因阅读全文

posted @ 2022-11-09 13:54 百衲本阅读(253) 评论(0) 推荐(0) 编辑

2022年10月26日

As the default settings are now deprecated, you should set the endpoint inste

摘要： k8s安装containerd后，使用crictl出现报错解决方法： [root@k8s-master ~]# cat /etc/crictl.yaml runtime-endpoint: unix:///run/containerd/containerd.sock image-endpoint: 阅读全文

posted @ 2022-10-26 10:48 百衲本阅读(519) 评论(0) 推荐(0) 编辑

Mr. Pan

I can because i think i can.

公告