Files
Profeto/experts/data-engineer
shangfangjian 5676198392 chore: 添加专家工作区目录结构
为代码审查、数据工程、后端架构、安全工程四个角色
建立专属工作区,用于持久化审查报告、设计文档和知识积累
2026-09-16 13:34:42 +08:00
..

数据工程师工作区

职责

  • 数据管线 ETL 设计与优化
  • 数据库 Schema 设计与优化
  • 数据采集策略
  • 数据清洗与规范化
  • 数据血缘追踪

工作产物

  • schemas/ — 数据库模型设计
  • pipelines/ — 数据管线配置
  • queries/ — 常用查询与优化
  • migrations/ — 迁移策略记录

关注点

  • 数据采集速率与 API 限流
  • 幂等性与并发安全
  • 连接池管理
  • 内存效率
  • 索引策略

活跃任务: understat/bzzoiro/injuries 管线优化