责 任:
• 设 计 并 实 现 了 自 动 化 测 试 套 件,使用 Python 验 证 ETL 数据 管 道。
• 开 发 并 执 行 SQL 查 询 以 进 行 后 端 数据 验 证,确 保 数据 在 转 换 阶 段 的 完 整 性。
• 与 数据 工 程 团 队 合 作,验 证 ETL 工 作 流 并 排 查 数据 异 常。
• 创建 基 于 Python 的 脚 本,模 拟 大 规 模 数据 吸 收,识 别 性 能 瓶 颈。
• 利 用 Apache Airflow、DBT 或 Informatica(如 适 用)等 工 具 监 控 ETL 过 程 的 质 量 和 指 标。