2023年3月13日

3.docker 搭建kafka和kafka-manager集群
摘要： 1.搭建zookeeper集群 docker-compose.yml文件 version: '3.1' services: zoo1: image: zookeeper restart: always hostname: zoo1 ports: - 2181:2181 environment: ZO 阅读全文
posted @ 2023-03-13 15:29 zhangdapangzi 阅读(135) 评论(0) 推荐(0) 编辑
 
5.docker elk（单节点）
摘要： 1.elasticsearch https://www.elastic.co/guide/en/elasticsearch/reference/7.5/docker.html 1.1.docker pull elasticsearch:7.13.0 (docker pull elasticsearc 阅读全文
posted @ 2023-03-13 15:28 zhangdapangzi 阅读(18) 评论(0) 推荐(0) 编辑
 
2.datax条件python3.6安装
摘要： 一.安装python3.6.1 1.安装依赖环境（必须安装否则会出现python3编译器中不能使用退格键和方向键） yum install readline-devel gcc make patch gdbm-devel openssl-devel sqlite-devel readline-dev 阅读全文
posted @ 2023-03-13 15:25 zhangdapangzi 阅读(139) 评论(0) 推荐(0) 编辑
 
3.datax-web搭建
摘要： 1.路径 mkdir /home/datax-web cd /home/datax-web 2.下载 https://github.com/WeiYe-Jing/datax-web https://pan.baidu.com/s/13yoqhGpD00I82K4lOYtQhg 密码：cpsk 3.解 阅读全文
posted @ 2023-03-13 15:23 zhangdapangzi 阅读(123) 评论(0) 推荐(0) 编辑
 
8.crontab+datax定时执行同步任务
摘要： # 添加定时任务crontab -e#每天23点50分执行sh脚本50 23 * * * /opt/datax/sync_gym_course_add.sh#每隔30分钟执行sh脚本*/30 * * * * /opt/datax/sync_gym_course_add.sh #查看crontab日志 阅读全文
posted @ 2023-03-13 15:19 zhangdapangzi 阅读(293) 评论(0) 推荐(0) 编辑
 
4.centos8 yum直接安装简单配置nginx
摘要： 1.安装nginx yum install -y nginx 2.启动nginx systemctl start nginx.service 3.设置开机自启 systemctl enable nginx.service 4.nginx 配置信息 网站文件存放默认位置（Welcome to ngin 阅读全文
posted @ 2023-03-13 15:16 zhangdapangzi 阅读(139) 评论(0) 推荐(0) 编辑
 
2.查看sql server进程
摘要： SELECT SPID = er.session_id ,Status = ses.status ,[Login] = ses.login_name ,Host = ses.host_name ,BlkBy = er.blocking_session_id ,DBName = DB_Name(er. 阅读全文
posted @ 2023-03-13 15:13 zhangdapangzi 阅读(102) 评论(0) 推荐(0) 编辑
 
22.docker mysql定时增量备份数据库
摘要： 遇到的问题： 查看mysql-bin-00001日志内容，默认配置用户对/var/lib/mysql下的binlog文件没有读的权限，只有写的权限，所以需要先对该用户赋权： chown -R mysql:huichao /var/lib/mysql 查看日志内容： mysqllogbin /var/ 阅读全文
posted @ 2023-03-13 15:12 zhangdapangzi 阅读(73) 评论(0) 推荐(0) 编辑
 
21.docker mysql定时全量备份数据库
摘要： #先运行全量备份，再运行增量备份 #!/bin/sh #需求,对数据库进行全量备份 #备份日期 dumpDate=$(date "+%Y%m%d") #三天前的日期 old=$(date -d"3 day ago" +"%Y%m%d") #备份开始详细时间 startTime=$(date "+%Y 阅读全文
posted @ 2023-03-13 15:11 zhangdapangzi 阅读(123) 评论(0) 推荐(0) 编辑
 
19.mysql优化建议二
摘要： 一,架构层面 1.做主从复制 2.实现读写分离 3.分库分表 二.系统层面 1.增加内存 2.硬盘使用固态硬盘SSD 3.给磁盘做raid0或者raid5以增加磁盘的读写速度 4.可以重新挂载磁盘，并加上noatime参数，这样可以减少磁盘的I/O 三.mysql本身的优化 1.如果未配置主从同步， 阅读全文
posted @ 2023-03-13 15:07 zhangdapangzi 阅读(27) 评论(0) 推荐(0) 编辑