职位概述:
我们正在寻找一位高技能且经验丰富的高级数据工程师,加入我们充满活力的数据团队。理想的候选人应具有扎实的数据工程背景,并在将遗留数据系统迁移到阿里云(Aliyun)方面有成功的记录。此职位要求对基于云的数据架构、数据管道开发和数据治理有深厚的专业知识,同时具备优秀的英语和普通话沟通能力。
主要职责:
• 领导在阿里云上设计、开发和维护可扩展的数据管道和架构。
• 推动并执行遗留数据迁移项目到阿里云,确保数据的完整性、安全性和性能。
• 与数据科学家、分析师和业务利益相关者等跨职能团队合作,了解数据需求并提供解决方案。
• 实施并维护数据治理、质量和安全标准。
• 优化数据工作流程,并排除性能瓶颈。
• 指导初级数据工程师,并为最佳实践和技术标准做出贡献。
所需资格:
• 10年以上数据工程或相关领域的整体经验。
• 5-6年阿里云(Aliyun)服务的实际操作经验,如MaxCompute、DataWorks、OSS、RDS和EMR。
• 在将遗留系统(例如,本地数据库、Hadoop或其他云平台)迁移到阿里云方面有成功经验。
• 精通Python、SQL编程,熟悉Java或Scala者优先。
• 具备数据建模、ETL/ELT流程和编排工具的经验。
• 熟悉DevOps实践和数据工程的CI/CD管道。
• 优秀的问题解决能力和独立工作能力。
• 流利的英语和普通话是必须的。
优先资格:
• 阿里云专业认证(例如,ACP大数据或ACP云计算)。
• 具备实时数据处理框架(例如,Apache Kafka、Flink)的经验。