职位名称:
数据工程师
地点:
伦敦(SE)- 可以选择混合/远程工作
薪资:
年薪高达73,000英镑
您是否在设计和实施数据基础设施方面有丰富经验?您是否在数据工程领域有超过5年的工作经验,并拥有相关学科的学士学位?The Recruitment Co.正在为我们的一家重要客户招聘,他们的总部位于伦敦,这可能是您的绝佳机会。
工作职责:
• 设计和实施可扩展且高效的数据基础设施,以支持组织的数据需求。
• 运用对数据库管理系统(如MySQL和PostgreSQL)的专业知识,确保数据存储的性能、可用性和安全性。
• 与其他团队合作,了解数据需求并设计与业务目标一致的解决方案。
• 开发ETL(抽取、转换、加载)流程,将数据从各种来源移动和转换到数据存储库中。
• 使用Python或Java等编程语言创建数据管道并自动化数据工作流程。
• 通过实施有效的数据验证和清洗流程,确保数据质量和完整性。
• 了解数据工程领域的行业最佳实践和新兴技术。
• 主动监控和优化数据基础设施的性能,及时识别和解决问题。
个人/经验要求:
• 熟练掌握数据库技术,包括MySQL和PostgreSQL。
• 有使用ETL流程和工具移动和转换数据的经验。
• 出色的编程技能,特别是Python。
• 熟悉大数据技术- Hadoop和Kafka。
• 熟悉数据仓库概念和最佳实践。
• 能够与其他团队合作并了解业务数据需求。
• 了解数据安全原则和最佳实践。
• 有使用AWS等云平台的经验。
• 计算机科学、信息技术或相关领域的学士学位。
• 在数据工程领域拥有5年以上的工作经验。
请注意,The Recruitment Co.是一家平等机会雇主。