职位描述
我们正在寻找一位熟练的数据质量开发人员,以支持我们的数据治理和质量计划。理想的候选人应具备强大的SQL专业知识,对端到端数据质量生命周期有扎实的理解,并具有使用Databricks设计、实施和维护数据质量框架的实际经验。
主要职责
• 开发、实施和维护数据质量规则、检查和验证流程。
• 分析数据集以识别质量差距并提出有效的补救措施。
• 与跨职能团队合作,定义和改进数据质量指标和标准。
• 在Databricks中构建可扩展的数据管道和工作流以支持数据质量计划。记录流程,维护数据质量仪表板,并确保持续改进。
必备技能
• 强大的SQL技能,能够编写复杂查询。
• 对数据质量生命周期的深刻理解和实际实施经验。
• 使用Databricks进行数据处理和管道开发的实际经验。