refactor(douyu): 完成阶段5旧链路清理

This commit is contained in:
yml
2026-11-22 21:40:53 +08:00
parent 94de1d167b
commit 5393b668e0
20 changed files with 155 additions and 559 deletions
@@ -11,8 +11,7 @@
更新时间:2026-11-21
阶段 0-4 已全部完成;阶段 5 尚未启动。若把阶段 5 的旧逻辑清理也计入,
整体实施进度约 **85%**。
阶段 0-5 已全部完成,整体实施进度 **100%**。
| 阶段 | 完成度 | 已落地 | 主要缺口 |
| --- | ---: | --- | --- |
@@ -21,7 +20,7 @@
| 阶段 2:账号与 CK | 100% | CK 周期字段、invalid 分流、登录流水、日/小时/分类/单账号预算、login_relogin 队列真实消费与退避回队、预算配置 API、库存与近期成功率驱动的预算建议 | 无 |
| 阶段 3:商品与供给 | 100% | 全量商品能力、限时窗口、原始响应、供给库存和目标缺口、定向补货入队、供给目标配置 API 与管理 UI、默认目标、统一平台状态快照、供给看板、阈值告警、7 天查询/登录/CK 趋势 | 无 |
| 阶段 4:安全恢复自动化 | 100% | account_sync_queue 与供给补货作业默认小批量开启,自动重登消费工作队列,硬失败率熔断,登录预算在线配置且熔断阈值实时生效,按 7 天成功率自动扩缩批次,长期低成功率告警,登录预算建议与人工一键应用 | 代码已完成;生产灰度效果继续观察 |
| 阶段 5:清理旧逻辑 | 20% | 履约补货不再直接发官网请求 | 旧资料刷新、旁路查询和旧候选兜底仍需逐步下线 |
| 阶段 5:清理旧逻辑 | 100% | 删除 legacy 实时选号、旧资料全量刷新、`query_limited_goods`/`refresh_goods` 任务入口和 Runner 分支;一键查询统一返回限兑信息;自动作业共享账号准入过滤;登录入口统一受预算约束 | 无 |
## 为什么重构
@@ -607,14 +606,15 @@ Runner 启动前必须有预算 token;没有 token 时留在工作队列。
### 阶段 5:清理旧逻辑
删除或降级:
已完成:
- Runner 内重复查询后写库
- 弱投影的 `query_limited_goods`
- 只写全局快照的 `refresh_goods`
- 作业各自拼接候选条件
- 自动选号 20 个账号实时扫描兜底
- 绕过登录配额的自动入口
- `account_overview_refresh` 全量定时刷新已删除,迁移 `0117` 停用生产旧配置;
- Runner 查询一次后直接同步账号能力,不再重复查询后补写;
- `query_limited_goods`、`refresh_goods` 已从任务类型、前端入口和 Runner 删除;
- 限兑数量与商品明细并入 `query_account_overview`,历史旧任务仍由清理作业回收;
- 自动选号只读本地能力索引,`legacy` 模式和 20 个账号实时扫描兜底已删除;
- CK 巡检、自动重登共享 `automation_account_filter` 账号准入;
- 人工登录、账号检测重登和自动重登统一经过 `LoginBatchRunner` 登录预算预占。
## 可观测性
@@ -699,6 +699,7 @@ Runner 启动前必须有预算 token;没有 token 时留在工作队列。
| 2026-11-21 | 阶段 4:增加基于库存、积压和近期成功率的登录预算建议及人工一键应用 |
| 2026-11-21 | 阶段 1:一键查询接入本地快照复用,商品过期改为后台同步,避免重复官网查询 |
| 2026-11-21 | 阶段 0-4 完成:全部账号查询域接入本地优先策略、独立同步工作项和兑换记录统一投影;阶段 5 暂不启动 |
| 2026-11-22 | 阶段 5 完成:删除 legacy 实时选号、旧商品任务入口和全量资料刷新,统一自动账号准入与登录预算入口 |
| 2026-11-22 | 履约租约改为状态化策略:默认无限,预售/人工独立配置,完成或取消后才设置释放时间 |
| 2026-11-22 | 按生产并发、CK 流失和历史领取峰值提高全局供给目标,并安全升级旧默认组合 |
| 2026-11-22 | 抽取统一账号准入过滤;外部协作推荐改为纯本地能力池,兑换记录统一走本地同步投影 |
@@ -416,7 +416,7 @@ AND 不违反内部兑换冷却
3. 将新鲜度与可查询性分开;
4. 建立官网同步运行记录;
5. 统一账号商品能力查询口径;
6. 自动选号移除无限实时扫描兜底;
6. 自动选号移除无限实时扫描兜底;阶段 5 已同时删除 legacy 实时选号代码;
7. 选号 API 增加任务级幂等、请求合并和前端 loading;
8. 外部官网检测迁移到独立 Worker,不长期占用 API 数据库连接。
+5 -4
View File
@@ -37,7 +37,7 @@
页面、外部单协作、直播账号履约和任务执行器只能调用该模块,不得直接调用
`DouyuActivityClient` 的只读查询方法。商品映射弹窗使用实时活动商品接口,
不再依赖本地是否执行过 `refresh_goods`。
不再依赖已淘汰的 `refresh_goods` 任务。
腾讯游戏绑定状态只有一个业务入口:
`web/backend/services/account_binding.py`。原始接口字段由
@@ -57,17 +57,18 @@
2026-11-22 起,默认选号是**纯本地数据库操作**:
- `hybrid` / `capability` 只读取新鲜 `account_commodity_states` 和账号主表,
- 选号只读取新鲜 `account_commodity_states` 和账号主表,
不再在分配热路径串行请求斗鱼官网;
- 一个账号的 `storehome` 商品列表会一次写入全部商品能力,不需要逐商品查询;
- 分配阶段只做账号硬过滤、候选排序和数据库租约抢占,通常应在毫秒级完成;
- 绑定二维码阶段会校验 CK/角色,兑换前“刷新兑换资格”仍会实时访问官网,
因此本地选号只负责快速占号,不替代最终业务校验;
- `legacy` 保留旧实时扫号逻辑,仅用于故障回滚和对比,不再是生产默认路径。
- 阶段 5 已删除 `legacy` 实时扫号和 20 个账号兜底代码,环境变量也不能再切回旧路径。
能力索引与调度规则:
- 一键查询或资料刷新把官方 `storehome` 商品状态写入 `account_commodity_states`;
- `query_account_overview` 一键查询把官方 `storehome` 商品状态写入
`account_commodity_states`,并直接在结果中返回限兑数量;
- `storehome` 一次返回账号可见的全部商品,逐商品写状态,但每个账号只需一次列表请求;
- 同时保存 `timeLimited`、`specTimes` 和起止时间,未开始/已结束与账号限兑分别处理;
- 账号兑换资格和活动窗口默认缓存 6 小时,库存仅作展示并默认缓存 15 分钟;