高级数据质量自动化工程师

温哥华 2天前全职 网络
面议
您是否被验证复杂数据系统的挑战所驱动,并确保支持业务关键决策的数据产品的可靠性?您是否擅长调试分布式数据工作流、分析转换,并为大规模数据环境设计自动化验证解决方案? 我们正在扩展我们的数据质量工程职能,寻求技术能力强的贡献者,他们可以在我们的数据平台上设计、实施和优化自动化数据验证框架。 作为高级数据质量自动化工程师,您将与数据工程、分析和平台团队密切合作,执行严格的数据质量标准,将自动化验证嵌入数据生命周期流程,并确保我们的管道和数据产品的正确性和稳定性。 我们采用远程优先的工作模式,在我们位于美丽的温哥华 BC 的总部进行面对面的互动,以实现战略、协作和社交目的。 立即申请并与我们的技术团队一起成长,成为高级数据质量自动化工程师 作为高级数据质量自动化工程师,您将: • 构建和维护自动化数据验证框架,以确保在 ETL 管道和下游消费者系统中的准确性、完整性和完整性。 • 开发基于 Python 的自动化测试,用于源到目标验证、业务逻辑验证、模式执行、异常检测和历史数据一致性。 • 使用 Airflow、Spark、Hive、SQL 和相关工具验证批处理和流数据系统中的数据逻辑和端到端流程。 • 将自动化数据质量检查嵌入 CI/CD 管道,以实现持续验证、高信噪比缺陷检测和跨环境的快速反馈。 • 与产品、数据工程、分析和平台团队合作,定义数据质量要求、验证标准和覆盖策略。 • 调查管道和分布式系统中的数据问题,使用日志和数据快照进行详细的根本原因分析,并在 JIRA 中记录可操作的、可重现的缺陷。 我们正在寻找的: • 在数据环境中有 5 年以上的 Python 开发经验。 • 3 年以上使用 PyTest、Selenium、Playwright 或 RestAssured 的高级测试自动化经验。 • 在敏捷环境中领导自动化或数据质量计划 2 年以上。 • 设计和实施基于 CI/CD 的数据验证自动化管道的专业知识。 • 在为大规模或分布式数据系统开发或架构测试框架方面有扎实的背景。 • 直接验证复杂的 ETL 系统、转换管道和分析/报告层的经验。 • 熟练使用 Airflow、Spark、Hive、SQL、Allure、Great Expectations 和相关技术。 您会喜欢这里的原因: • 从第一天起就享受超酷科技产品的员工折扣 • 灵活的健康福利和健康计划 • TFSA 和 RRSP 计划 • 公司 100% 匹配的养老金计划 • 培训计划以建立新的和可转移的技能 关于 Best Buy 作为加拿大最酷科技产品的目的地,Best Buy 提供了全国最佳的工作环境之一。我们的文化是包容和归属感,为员工提供了一个可以全身心投入工作的环境。 我们相信公平和包容的招聘过程。即使您可能不符合所有要求,我们也鼓励您申请。 加入我们出色的团队 我们正在寻找像您这样的人。 年薪范围 $100, $106,000.00 除了上述薪酬范围外,该职位还符合公司绩效奖金的资格。 起薪将根据技能和经验考虑。随着您在我们公司职业生涯的发展,您的薪酬也会增长。 Suite West 6th Avenue, Vancouver, BC V5Y 1L3 此职位发布是为了招聘空缺。 PandoLogic. 类别:工程, 关键词:自动化工程师, 地点:Gibsons, BC-V0N 1V2