03 2023 档案

摘要:MySQL在5.6的版本推出了GTID复制,相比传统的复制,GTID复制对于运维更加友好,这个事务是谁产⽣,产⽣多少事务,⾮常直接的标识出来,当然GTID也有限制,对于什么是GTID可以参考我之前的文章:MySQL 5.6 GTID Replication,那么今天主要是想和同学们分享一下关于从库s 阅读全文
posted @ 2023-03-29 14:22 whiteY 阅读(64) 评论(0) 推荐(0) 编辑
摘要:###问题现象 线上数据库出现数据无法写入,排查发现有一个truncate table操作导致system lock系统锁。 truncate引起system lock分析 truncate table通过释放存储表数据所用的数据页来删除数据,并且只在事务日志中记录页的释放,不记录每行删除的日志。 阅读全文
posted @ 2023-03-24 16:27 whiteY 阅读(434) 评论(0) 推荐(0) 编辑
摘要:###Linux 链接概念 Linux 链接分两种,一种被称为硬链接(Hard Link),另一种被称为符号链接(Symbolic Link)。默认情况下,ln 命令产生硬链接。 ###硬连接 通过索引节点来进行连接。在 Linux 的文件系统中,保存在磁盘分区中的文件不管是什么类型都给它分配一个编 阅读全文
posted @ 2023-03-24 11:25 whiteY 阅读(63) 评论(0) 推荐(0) 编辑
摘要:###python os 模块使用(文件遍历) ####需求如下 #####遍历指定目录,完成以下操作 ######1:判断该目录下所有的文件的名称及大小,文件大小以用户选择的方式显示(KB,MB,B) list_file() os listdir file_size() getsize(B) 数据 阅读全文
posted @ 2023-03-10 10:38 whiteY 阅读(58) 评论(0) 推荐(0) 编辑
摘要:jupyter notebook 页面打开空白问题解决方法 下载anaconda自带的jupyter notebook 找到这个配置文件 C:\Users\Administrator.jupyter\jupyter_notebook_config.py 打开找到NotebookApp.browser 阅读全文
posted @ 2023-03-10 10:34 whiteY 阅读(2116) 评论(0) 推荐(0) 编辑
摘要:###Windows环境下pip问题 ####1.pip命令 报错 解决办法 python -m pip --v ####2.pip下载模块超时问题(换源) python -m pip install requests -i https://pypi.douban.com/simple/ pytho 阅读全文
posted @ 2023-03-10 10:28 whiteY 阅读(58) 评论(0) 推荐(0) 编辑
摘要:###1.创建对指定索引集合的只读角色(names:* 指所有) POST /_security/role/read_only { "indices": [ { "names": [ "test-index", ], "privileges": [ "read" ] } ] } ###2.创建用户并 阅读全文
posted @ 2023-03-09 14:21 whiteY 阅读(991) 评论(0) 推荐(0) 编辑
摘要:###ambari上边的服务显示心跳丢失Heartbeat Lost,图标变黄 自己用虚拟机搭建的三台hadoop集群,重新启动后所有服务显示心跳丢失Heartbeat Lost ####解决方法: 重新启动 ambari-agent ambari-agent restart 阅读全文
posted @ 2023-03-07 14:35 whiteY 阅读(483) 评论(0) 推荐(0) 编辑
摘要:###一、Hive使用本地模式执行操作(Hive使用资源大于20M的时候还是会采用集群yarn的方式运行) 将hive的job交给yarn执行太慢,hive支持本地模式 设置本地模式之前的,耗时 9.068 设置本地模式之后的,耗时 0.29 ####具体设置方法 1.1、设置临时的 在每次执行hq 阅读全文
posted @ 2023-03-06 10:24 whiteY 阅读(2343) 评论(0) 推荐(0) 编辑
摘要:##一、介绍 1、本博客以 hadoop 集群搭建时的NTP-server 为例。 2、hosts # vim /etc/hosts 192.168.2.128 hadoop01 (作为时间服务器) 192.168.2.129 hadoop02 (作为 client) ##二、安装、配置 1、安装( 阅读全文
posted @ 2023-03-03 15:16 whiteY 阅读(194) 评论(0) 推荐(0) 编辑

点击右上角即可分享
微信分享提示