10 2023 档案
摘要:flink 计数器 flink source 中设置计数器 https://blog.csdn.net/yy8623977/article/details/119767594 https://blog.csdn.net/weixin_44844089/article/details/10398781
阅读全文
摘要:helm笔记 helm 部署zookeeper集群 # 添加bitnami和官方helm仓库: helm repo add bitnami https://charts.bitnami.com/bitnami # 查看仓库 helm repo list # 部署zookeeper集群 helm in
阅读全文
摘要:kubectl run kubectl run lianjia-kafka-client --restart='Never' --image docker.io/bitnami/kafka:3.6.0-debian-11-r0 --namespace minicloudsky --command -
阅读全文
摘要:k8s常用命令 awk 打印从某一列到最后一列的内容 history|grep"ls"|awk'{print $3}'>third_column.txt history|awk '{print $3}'>third_column.txt history|awk '{print $3}' | more
阅读全文
摘要:mqtt笔记 在 MQTT 中,subscriptions.count 是指客户端订阅的主题数量。每当客户端订阅一个主题,subscriptions.count 的值就会增加。这个参数用于限制客户端可以订阅的最大主题数量。 一般来说,subscriptions.count 的配置应该根据你的应用需求
阅读全文
摘要:Flink1.17 笔记 Flink容错重启策略 https://blog.csdn.net/weixin_43871785/article/details/132096500 https://blog.csdn.net/dwjlyl/article/details/127466438 KAFKA配
阅读全文
摘要:Kafka 拦截器 https://blog.csdn.net/qq_44226094/article/details/129428872 Kafka 拦截器可用于:客户端监控、端到端系统性能检测、消息审计 用拦截器统计消息端到端处理的延时 docker-compose搭建redis哨兵,集群 ht
阅读全文
摘要:数据分层 分层架构的好处 分层架构的目的是通过关注点分离来降低系统的复杂度,同时满足单一职责、高内聚、低耦合、提高可复用性和降低维护成本。 单一职责:每一层只负责一个职责,职责边界清晰,如持久层只负责数据查询和存储,领域层只负责处理业务逻辑。 高内聚:分层是把相同的职责放在同一个层中,所有业务逻辑内
阅读全文
摘要:Mysql切割数据函数 https://blog.csdn.net/weixin_45592182/article/details/108617860 mysql-->判断是否包含 https://blog.csdn.net/weixin_73361196/article/details/12981
阅读全文
摘要:有序的Map集合 Java提供了两种有序的Map集合:LinkedHashMap和TreeMap; flink run demo task one bin/flink run \ -t yarn-per-job \ -d \ -p 5 \ 指定并行度 -Dyarn.application.queue
阅读全文
摘要:kafka 常见错误 Error registering AppInfo mbean [WARN ] 2023-10-24 14:41:27.027 org.apache.kafka.common.utils.AppInfoParser registerAppInfo 68 main Error r
阅读全文
摘要:Linux中history命令中的-w和-a参数个人理解 结论 history -a 将history命令中所能看到的所有命令都追加入.bash_history文件中。 history -w 将未更新在.bash_history文件中的历史命令进行追加。 默认情况下,Bash只会记录已打开的第一个实
阅读全文
摘要:RAID详解+RAID5配置实战 RAID 将一组硬盘连结起来,组成一个阵列,以避免单个硬盘损坏而带来的数据损失, 同时亦提供了比单个硬盘高的可用性及容错性。常见的组合方式有:RAID0、RAID1、RAID5、 RAID6、RAID01、RAID10,下面分别介绍它们的特性。 RAID 0:一块或
阅读全文
摘要:Docker之compose介绍 https://blog.csdn.net/weixin_71429850/article/details/127437081 使用一个Dockerfile模板文件可以定义一个单独的应用容器,如果需要定义多个容器就需要服务编排。下面介绍Docker官方产品,Dock
阅读全文
摘要:mysql 日志分析工具之 mysqlsla MySQL Statement Log Analyzer 很多情况下,都需要对 MySQL 日志进行各种分析,来了解系统运行的方方面面。MySQL 官方自带了一些工具对日志进行分析,比如 mysqlbinlog 可以用来分析二进制日志,mysqlslow
阅读全文
摘要:用 docker 部署kafka https://blog.csdn.net/lijiewen2017/article/details/127609875
阅读全文
摘要:linux关机命令 知识,本该纯粹真实。 不应为乱象而迷失,因避讳而藏掖。 linux关机命令有五个,分别如下:shutdown。poweroff。init。reboot。halt。 Crontab介绍:Linux crontab是用来crontab命令常见于Unix和类Unix的操作系统之中,用于
阅读全文
摘要:使用portainer连接远程docker的教程 http://www.pcxitongcheng.com/server/anz/2020-03-05/9061.html Portainer是一个轻量级的docker环境管理UI,可以用来管理docker宿主机和docker swarm集群。他的轻量
阅读全文
摘要:CentOS Stream的yum配置及其docker镜像使用 https://www.modb.pro/db/642318 CentOS镜像源配置 https://cloud.tencent.com/developer/article/1923875 https://blog.51cto.com/
阅读全文
摘要:mysqlsla 笔记 ClickHouse 杂记 在ClickHouse中,可以采用以下方法来加快1亿明细表数据和500w维度表数据的join速度: 使用合适的join算法:ClickHouse提供了多种join算法,包括直接join、哈希join、并行哈希join、优雅哈希join、全排序合并j
阅读全文
摘要:基于Dockerfile构建镜像应用 https://hub.docker.com/_/centos https://hub.docker.com/_/centos/tags https://blog.51cto.com/u_16175492/6932082 docker pull centos:c
阅读全文
摘要:centos 9 安装 详细步骤 https://zhuanlan.zhihu.com/p/652569096?utm_id=0 CentOS Stream 9 配置静态 IP // CentOS7 service network start/restart/status systemctl sta
阅读全文
摘要:修改Mariadb数据库存储路径及日志路径 #!/bin/bash mysql_log=/data/log/mysql ###新的日志存储路径 mysql_modify=/etc/mysql/mariadb.conf.d/50-server.cnf ###Mariadb配置文件路径 sudo mkd
阅读全文
摘要:组件通信 注意:组件通信在你们将来面试的时候出现频率超级高。、 前面基础的时候:组件通信讲了6种? 组件通信方式1:props 使用场景:[父子通信] 传递数据类型: 1:可能是函数 实质子组件想给父亲传递数据 2:可能不是函数 实质就是父亲给子组件传递数据 特殊情况:路由传递props 1:布尔值
阅读全文
摘要:TypeScript 笔记 lang="ts":这通常是指 TypeScript,它是一种由微软开发的开源编程语言。TypeScript 是 JavaScript 的超集,它添加了静态类型检查和其他一些特性,以提高代码的可维护性和可读性。TypeScript 文件通常具有 .ts 扩展名。 lang
阅读全文
摘要:Hbase表映射Hive表三种方法 https://blog.csdn.net/qq_39680564/article/details/89948253 https://cwiki.apache.org/confluence/display/Hive/HBaseIntegration Hive3.1
阅读全文
摘要:协同合作 Confluence https://www.jianshu.com/p/f79236289793 Confluence是一个企业级的Wiki,可用于企业、部门、团队内部进行信息共享和协同编辑。 关键词:信息共享、协同编辑 showdoc https://www.showdoc.com.c
阅读全文
摘要:110道 MySQL面试题及答案 110道 MySQL面试题及答案 MySQL之为什么不建议使用外键约束 Mac版navicat生成ER图把表结构导出pdf https://www.cnblogs.com/zdz8207/p/mac-navicat-er-pdf.html
阅读全文
摘要:Mock JS笔记 使用 Mock.js - 安装 npm i mockjs -D - 准备工作 新建 src/mock 文件夹、准备 json 数据(banners.json、floors.json) - 配置 新建 mockServer.js,配置文件 - 全局使用 main.js 中引入并执行
阅读全文
摘要:Vue3 常用组件 项目依赖项 "dependencies": { "animate.css": "^4.1.1", "axios": "^1.5.0", "core-js": "^3.8.3", "element-ui": "^2.15.14", "less-loader": "^11.1.3",
阅读全文
摘要:Hive和Hbase对比 Hive应用场景 数据分析:Hive可以用于处理大规模结构化数据集,例如Web日志、交易记录和社交媒体数据等。它可以帮助企业和组织快速分析大量数据,以获取有价值的洞察。 数据仓库:Hive可以用于构建大型数据仓库,以存储和管理大量结构化数据。 ETL:Hive可以用于执行数
阅读全文
摘要:MySQL存储过程 -- //创建存储过程前先检查是否存在,存在就删除,这个可以忽略 DROP PROCEDURE IF EXISTS p_calc_production; -- //存储过程 CREATE PROCEDURE p_calc_production() BEGIN -- //该变量用于
阅读全文
摘要:MariaDB 统计表大小 select table_schema as '数据库', table_name as '表名', table_rows as '记录数', truncate(data_length/1024/1024, 2) as '数据容量(MB)', truncate(index_
阅读全文
摘要:数仓笔记 数仓分层 ods => dwd dim => dws => dwt => ads ods => dwd dim => ads
阅读全文
摘要:HBase 在线删除oldWAL释放磁盘空间 https://blog.csdn.net/Post_Yuan/article/details/126143674 HBase的WAL日志会从WAL转移到oldWAL目录,oldWAL可以通过参数来设置保留时效,如以下截图是将oldWAL设置为7天,通过
阅读全文
摘要:Apache Sentry和Ranger Apache Sentry Sentry是由Cloudera公司内部开发而来的,初衷是为了让用户能够细粒度的控制Hadoop系统中的数据(这里主要指HDFS,Hive的数据)。所以Sentry对HDFS,Hive以及同样由Cloudera开发的Impala有
阅读全文
摘要:HBASE列族设计原则 HBASE列族设计原则 列族应具有相似的访问模式 列族的数量应适中 列族的大小应适中 避免频繁的列族变更 通过根据访问模式设计相似的列族、控制列族和大小,以及避免频繁的列族变更,可以提高数据的读写效率和系统的可维护性。 参考资料 https://blog.51cto.com/
阅读全文
摘要:localstorage 必知必会 https://www.runoob.com/w3cnote/localstorage-spec.html
阅读全文
摘要:Linux 记录登录日志 mkdir -p /opt/shell/loginlog vim ~/.bashrc source ~/.bashrc USER_IP=`who -u am i 2>/dev/null| awk '{print $NF}'|sed -e 's/[()]//g'` if [
阅读全文