环境不是一台机器而是一份契约
自动化测试依赖多。数据库、缓存、消息队列、第三方接口、文件存储。塞同一台虚机,早晚互相踩。端口冲突,内存抢占,数据污染。隔离不是洁癖,是止损。能容器化就容器化。不能容器化的老系统,至少给独立 schema、独立队列前缀、独立 bucket。别让两个测试任务共享一个库。并发一上来,A 删了 B 的数据,B 的用例随机失败。查三天,查不出来。契约还包括版本。测试环境 MySQL 5.7,生产 8.0。你本地过,预发挂。这种坑很常见。环境治理不是追求和生产 100% 一致,太贵。是明确哪些必须一致,哪些可以 mock。数据库大版本、字符集、时区,必须一致。第三方支付,mock。短信,mock。别为了真实把测试搞成慢动作。Mock 也不是随便写。接口返回结构变了,mock 不知道。所以 mock 要版本化,最好从 API 契约生成。不然你测了个假世界。
脏数据比脏环境更隐蔽
环境干净,数据脏,照样翻车。用例 A 创建用户 test001,用例 B 也创建 test001。谁先谁后,看运气。解决方式不复杂:数据隔离。每个用例生成唯一前缀,跑完清理。或者用事务回滚。但事务回滚有坑。测消息队列、测异步任务,事务外面已经发出去了,回滚没用。这时候要靠环境层面兜底:每次流水线起一套临时环境,跑完销毁。听着费钱,其实比人肉排查便宜。临时环境好,但没人回收就是灾难。云账号里躺着几百台机器,标签写着 test,不知道谁建的。账单来了才有人问。
CI流水线测试环境配置漂移检测与回收流程图