2024年8月23日
大数据痛点及问题
摘要： 大数据实时处理业务架构： 除20%的代码设计问题之外，80%为配置、环境、数据延迟、堆压、丢失、重复问题；（1）mysql或tidb-FLINK CDC同步kafka延迟 数据库连接数限制：Oracle 数据库通常有连接数限制，如果连接数超过了限制，就会导致同步延迟增加。可以通过修改数据库参数或者调 阅读全文
posted @ 2024-08-23 20:28 xiaowangzi3668 阅读(20) 评论(0) 推荐(0) 编辑
基于Cucumber框架的学习
摘要： 1、什么是Cucumber测试框架 Cucumber是一个行为驱动开发（BDD）工具，它支持自然语言的测试用例编写和自动化测试执行，同时提供了丰富的插件和扩展。它使用一种名为Gherkin的特定语言来描述应用程序的行为，这种语言非常接近自然语言，使得非技术人员也能够理解和参与测试。 1.1 什么是B 阅读全文
posted @ 2024-08-23 00:09 xiaowangzi3668 阅读(173) 评论(0) 推荐(0) 编辑
2024年5月22日
Hive SQL知识合集
摘要： 一、单表查询 SELECT [ALL | DISTINCT] select_expr, select_expr, ... FROM table_reference [WHERE where_condition] [GROUP BY col_list [HAVING condition]] [CLUS 阅读全文
posted @ 2024-05-22 17:01 xiaowangzi3668 阅读(608) 评论(0) 推荐(0) 编辑
2024年5月9日
Tasks 和算子链
摘要： Flink中的每一个操作算子称为一个Task（任务），算子的每个具体实例则称为SubTask（子任务），SubTask是Flink中最小的处理单元，多个SubTask可能在不同的机器上执行。一个TaskManager进程包含一个或多个执行线程，用于执行SubTask。 TaskManager中的一个 阅读全文
posted @ 2024-05-09 13:47 xiaowangzi3668 阅读(57) 评论(0) 推荐(0) 编辑
Flink架构与原理
摘要： Flink内部物理架构： Flink集群运行剖析 Flink 运行时由两种类型的进程组成：一个 JobManager 和一个或者多个 TaskManager。 Client：Client是提交作业的客户端，虽然不是运行时和作业执行时的一部分，但它负责准备和提交作业到JobManager，它可以运行在 阅读全文
posted @ 2024-05-09 10:42 xiaowangzi3668 阅读(132) 评论(0) 推荐(0) 编辑
2023年1月17日
GIT命令操作_一期
摘要： （1）如何使用git merge方法合并master分支代码到自己分支 git checkout master # 切换本地分支为master git pull # 更新本地分支master代码为远程最新代码 git checkout [自己的分支名] # 切换到自己的分支 git merge ma 阅读全文
posted @ 2023-01-17 11:12 xiaowangzi3668 阅读(19) 评论(0) 推荐(0) 编辑
2022年12月27日
MYSQL的常用实用功能
摘要： （1）show create table比如 >>desc 'order' 能够看到order表中的字段名称、字段类型、字段长度、是否允许为空，是否主键、默认值等信息。不能看到该表的索引信息查看字段和索引数据直观呈现，例如：show create table `order`; 我们能够看到非常完整的 阅读全文
posted @ 2022-12-27 11:53 xiaowangzi3668 阅读(90) 评论(0) 推荐(0) 编辑
2022年7月21日
Whistle设置更改request请求为status=502，验证页面错误弹窗、request重试机制
摘要： (1)MAC系统更适合Whistle，安装Whistle参照如下：https://www.cnblogs.com/fafa-coding/p/10819526.html（此为Whistle在windows上的安装） 不同之处：MAC系统设置代理，如下： (2) Chrome设置如下： 添加Switc 阅读全文
posted @ 2022-07-21 18:54 xiaowangzi3668 阅读(1289) 评论(0) 推荐(0) 编辑
2022年5月14日
Python 虚拟环境venv详解
摘要： 1、新建Python项目时，往往会面临选择 “本地编译器”OR “虚拟环境编译器”，如下图： （1） 选择 "New environment using", 可选Virtualenv、Pipenv、Conda, 大部分时候选择Virtualenv虚拟环境，选择Virtualenv，则项目目录结构中会 阅读全文
posted @ 2022-05-14 21:41 xiaowangzi3668 阅读(3882) 评论(0) 推荐(1) 编辑
2022年1月12日
unittest测试框架之解读
摘要： 一：单元测试框架应用及说明Unittest是Python语言的单元测试框架，UnitTest单元测试框架提供了创建测试用例，测试套件，和批量执行测试用例的方法，可以用于单元自动化测试（模块）、接口自动化测试（接口）、功能自动化测试（UI）等等。二：Unttest框架的4个重要概念(1)test fi 阅读全文
posted @ 2022-01-12 22:37 xiaowangzi3668 阅读(81) 评论(0) 推荐(0) 编辑
下一页
点击右上角即可分享
微信分享提示