test(db): 测试改用真实 MySQL,方言差异不再漏到生产
生产是 MySQL 8、测试是 SQLite,两者的方言差异在本地完全测不出来。今天为此 付出了两次代价: 1. `ORDER BY ck_checked_at ASC NULLS FIRST` 在 SQLite 上完全正常,本地 258 条 全绿,一部署到生产第一次巡检就 1064 语法错误(MySQL 不支持 NULLS FIRST); 2. P1b 自动重登的结算复用调度器事务读取,在 SQLite 下看不出问题,但在 MySQL 的 REPEATABLE READ 下读到的是批次开始前的快照 —— 10 条实际成功的重登全部被记成 失败。SQLite 的读一致性与 MySQL 不同,这类问题跑一万遍也复现不出来。 改动: - 新增 tests/support/db.py:测试专用引擎/会话工具,连接串从 .env 读取, 默认指向独立的 douyu_login_test 库; - 新增 tests/conftest.py:会话级建好表结构,每个用例前后清空所有表做隔离; - 根 conftest.py 接管连接串设置:它在 pytest 收集阶段最先执行,在这里把 DATABASE_URL 指向测试库,应用模块首次 import 拿到就是 MySQL,不依赖任何 import 顺序(原先这里是 sqlite:// 兜底,改造后会变成「先建 SQLite engine 再打补丁换成 MySQL」,顺序一变就静默跑错库); - 21 个测试文件的 setup 样板统一改用共享测试引擎; - 两个迁移测试改为在临时库 douyu_login_mig_<随机> 上跑完整 alembic upgrade head, 跑完 drop —— 迁移脚本本身也终于在 MySQL 上被验证; - dev.sh 与 README 的过时说明一并更新(原先写着「不需要 MySQL / .env 配置」; 「测试各自建 SQLite 内存库」)。 安全与易用: - 测试库名与开发库同名时**直接拒绝运行**(clear_tables 会 DELETE 所有表, 一旦 TEST_MYSQL_DATABASE 被指到 douyu_login 就是数据灾难); - 连不上 MySQL 时给出可操作提示(先 ./dev.sh 起库 / 用 TEST_MYSQL_DATABASE 覆盖), 而不是抛一段 SQLAlchemy 原始堆栈。 验收: - 全量 301 条通过,连跑两次结果一致(隔离有效),耗时约 12.5 秒(原 SQLite 约 3.6 秒); - 单文件独立运行通过(不依赖全量执行顺序); - `grep -rn sqlite tests/ conftest.py` 已无实际用法; - **方言确实生效**:临时把一条查询改回 `NULLS FIRST`,13 条测试立刻变红(含运行期 失败),还原即恢复;这条由 test_generated_sql_is_mysql_compatible 长期守着。 代价(已在 README 与规划附录 C.2 记明):跑测试前必须先有 MySQL,pre-push 钩子 同理;CI 需要 service container。
This commit is contained in:
+12
-6
@@ -1,14 +1,20 @@
|
||||
"""pytest 全局引导:在导入任何应用模块前固定测试数据库与加密密钥。
|
||||
"""pytest 全局引导:在导入任何应用模块前定好测试库与加密密钥。
|
||||
|
||||
web/backend 的模块在 import 阶段就会读取 DATABASE_URL 创建全局引擎、
|
||||
读取 APP_ENCRYPTION_KEY 初始化敏感字段加密,因此这两个环境变量必须在
|
||||
测试模块加载之前设置好。各测试文件自身使用独立的 SQLite 内存引擎做
|
||||
数据隔离,这里统一兜底,避免误连开发/生产数据库。
|
||||
这个文件在 pytest 收集阶段**最先执行**,所以「让测试连上测试库」这件事放在这里
|
||||
最稳 —— 不依赖任何测试文件或 tests/conftest.py 的 import 顺序。
|
||||
|
||||
背景:web/backend 的模块在 import 阶段就会读 DATABASE_URL 建全局 engine、读
|
||||
APP_ENCRYPTION_KEY 初始化敏感字段加密。之前这里塞的是 ``sqlite://`` 兜底,
|
||||
测试改用 MySQL 后就会变成「先按 SQLite 建 engine、再靠后面打补丁换成 MySQL」,
|
||||
顺序一变就静默跑错库。
|
||||
"""
|
||||
|
||||
import os
|
||||
|
||||
os.environ.setdefault("DATABASE_URL", "sqlite://")
|
||||
os.environ.setdefault(
|
||||
"APP_ENCRYPTION_KEY", "MDEyMzQ1Njc4OWFiY2RlZjAxMjM0NTY3ODlhYmNkZWY="
|
||||
)
|
||||
|
||||
# 导入即完成设置:tests/support/db.py 会把 DATABASE_URL 指向独立测试库
|
||||
# (默认 douyu_login_test;库名与开发库相同时直接拒绝运行,防止清表误伤)。
|
||||
from tests.support.db import TEST_DB_URL # noqa: F401
|
||||
|
||||
Reference in New Issue
Block a user