【策略测试】策略测试记录

1、测试深度和广度 => 服务化 => 平台化

2、横向校验 和 纵向校验

（1）横向校验：从策略+工程看做一个整体的业务流程，进行业务分层，从整个架构层面发现每个业务层可能存在的问题 -- 根据业务规则（业务过滤、一致性等特性）构建漏斗分析模型？

（2）纵向校验：深入策略算法本身测试 -- 包括算法正确性和算法合理性测试。

算法正确性测试：

（1）数据层：数据准确性测试、数据分布测试

（2）模型层：算法逻辑测试？特征校验、蜕变测试？算法稳定性建设：主要是性能抗压问题；

算法合理性测试：

效果？如何离线效果评估？

 

测试深度和广度：

（1）服务化：

测试方法开放共建、测试方法外部服务化、AI自动化：

1）模型自动化评估系统（策略数据回放、从真实流量上进行仿真形成模型自动化评估体系）

2）数据测试自动化

（2）平台化

算法测试方法：正确性测试和合理性测试