01 2022 档案
摘要:黑盒测试的挑战 过程:多猜测,不稳定,难控制 效果:个人素质 管理:成本高,难度大 白盒测试 门槛高,单兵作战,目标单一(高覆盖率),分析之殇(对用户的影响) 互联网基本不做,迭代测试不允许 一.精准化测试思想 用非常精准和智能的软件来解决软件测试的问题,并从根本上引领软件测试从经验型方法向技术性方
阅读全文
摘要:一.元数据概述 (1)元数据定义 按照传统的定义,元数据( Metadata )是关于数据的数据。元数据打通了源数据、数据仓库、数据应用,记录了数据从产生到消费的全过程。 元数据主要记录数据仓库中模型的定义、各层级间的映射关系、监控数据仓库的数据状态及 ETL 的任务运行状态。在数据仓库系统中,元数
阅读全文
摘要:一.为什么需要数据建模 数据模型就是数据组织和存储方法,它强调从业务、数据存取和使用角度合理存储数据。 Linux 的创始人 Torva lds 一段关于“什么才是优秀程序员”的话:“烂程序员关心的是代码,好程序员关心的是数据结构和它们之间的关系”,其阐述了数据模型的重要性。有了适合业务和基础数据存
阅读全文
摘要:实时技术:实时流式技术。 按照数据的延迟情况,数据时效性一般分为三种(离线、准实时、 实时) 离线:在今天( )处理 天前 N, N > I )的数据,延迟时间粒度为天。 准实时 :在当前小时( )处理 小时前 H-N, N>O ,如 0.5小时、 小时等)的数据,延迟时间粒度为小时。 实时 :在当
阅读全文
摘要:数据研发:了解需求→模型设计→ETL 开发→测试→发布上线→日常运维→任务下线。 数据开发平台 MaxCompute 由四部分组成,分别是客户端( MaxCompute Client )、接人层( MaxCompute Front End )、逻辑层( MaxCompt Server )及存储与计算
阅读全文
摘要:数据同步基础:数据同步技术更通用的含义是不同系统间的数据流转,有多种不同的应用场景。主数据库与备份数据库之间的数据备份,以及主系统与子系统之间的数据更新,属于同类型不同集群数据库之间的数据同步。另外,还有不同地域、不同数据库类型之间的数据传输交换,比如分布式业务系统与数据仓库系统之间的数据同步。对于
阅读全文
摘要:一.日志采集 阿里巴巴的日志采集体系方案包括两大体系: Ap us.JS Web (基于浏览器)日志采集技术方案: UserTrack APP 端(无线客户端 日志采集技术方案。 1.浏览器的页面日志采集 ( 1 )页面浏览(展现)日志采集,也是目前所有互联网产品的两大基本指标:页面浏览量( Pag
阅读全文