12 2023 档案
摘要:一。Flink和Spark一样,是一个大数据处理引擎。主要区别在于Flink做的是流处理,Spark做的是批处理。 二。Flink处理的是无界的和有界的数据流,做有状态的计算。Flink 设计旨在所有常见的集群环境中运行,以任意规模和内存级速度执行计算。 三。Flink 具有以下几个特点: 支持流处
阅读全文
摘要:实现原来:请求接口数据,数据解析,数据进行处理,使用echarts进行趋势图绘制,截图邮件,数据阈值范围判断,对接软件告警,Jenkins持续集成; 一.数据处理: 二.结构 三.基础方法:
阅读全文
摘要:在接口测试中,大多数项目的接口是需要登录后进行操作的,经常用到requests库进行模拟登录及登录后的操作,下面是我不断踩坑后总结出来的关于登录凭证cookies的3种操作方法。 一. 用 requests.utils.dict_from_cookiejar() 把返回的cookies转换成字典 1
阅读全文
摘要:ETL是将业务系统的数据经过抽取、清洗转换之后加载到数据仓库的过程,目的是将企业中的分散、零乱、标准不统一的数据整合到一起,为企业的决策提供分析依据。 ETL是BI项目重要的一个环节。 通常情况下,在BI项目中ETL会花掉整个项目至少1/3的时间,ETL设计的好坏直接关接到BI项目的成败。 ETL的
阅读全文
摘要:json响应结果 Postman是做接口测试的,但是很多接口并不是直接就能测试的,需要一些预处理。比如登录的时候,需要传递一个token。如果是网页测试,一般打开登录页面的时候就会自动生成一个token,如果返回的是json格式,用Postman从中提取值很简单的,在Test中输入: { "acce
阅读全文