 shangfangjian
|
9ccda4bf51
|
fix(critical): 恢复 bzzoiro events 采集管线,消除数据源注册表静默失效
C2 数据丢失修复。重构提交 6a49940 删除了 src/data/bzzoiro.py 中的
fetch_bzzoiro_events 与 BzzoiroSource 后未做替换,同时 sources.py 用
`try/except Exception: pass` 吞掉了 ImportError,导致:
- _SOURCES 注册表恒为空
- get_source("bzzoiro") 恒抛 ValueError("未知数据源: bzzoiro")
- src/api/routes/ingest.py 与 schedules.py 运行时全线失效,
且日志中无任何导入错误痕迹
修复内容:
1. 从 f05dc1a 恢复并移植 events 管线:
- fetch_bzzoiro_events():分页抓取 /events/(纯异步,复用现有 _fetch_json_async)
- @register class BzzoiroSource + ingest():保留原签名
(db, *, leagues, date_from, date_to, status),保持「不 commit,
事务由调用方 UnitOfWork 控制」的契约,并保留单联赛抓取失败的
错误隔离(记录 error 后 continue)
- 复用现有 _to_date / _to_int_or_none / _match_key,未重复定义
- 血缘字段继续使用与 nm 配对的 raw(避免 P0-3 回归)
2. sources.py:导入失败改为 logger.exception 记录,新增 _loaded 标记
保证 _load_sources() 至多执行一次;失败时不置位以便后续重试。
get_source() 对真正未知的名字仍抛 ValueError。
验证:
- 新增 tests/test_bzzoiro_source_registry.py(8 项):注册表非空、
get_source/list_sources 可用、ingest 签名契约、不再静默吞异常
- test_regressions.py:3 failed -> 2 failed
- 全量:14 failed -> 13 failed,通过数 190 -> 199
注意事项:未改动任何 caller(routes/ingest.py、routes/schedules.py 原样
可用,证明签名保持正确)。
|
2026-09-21 17:10:17 +08:00 |
|