我们目前正在寻找一位积极主动、技术娴熟的数据工程师,为我们的客户建立稳固的基础数据基础设施发挥关键作用。
重点是开发和提供数据解决方案,使数据科学家、分析师和产品经理能够更深入地了解业务。
您的职责:
• 主导选择最佳的云解决方案,用于数据存储、处理和编排,同时确保成本效益。
• 使用尖端技术和性能调优技巧设计、构建和部署批处理和实时数据管道、存储和模型架构。
• 协作选择工具来管理自动化工作流程和数据治理。
• 承担关键数据管道的责任,确保符合SLA,并不断提高管道效率和数据质量。
• 促进数据集成和转换需求,促进应用程序、数据库数据仓库和数据集市之间的互操作性。
• 为数据存储和处理的技术栈的设计和管理做出贡献。
关键要求:
• 在数据工程职位上拥有5年以上的经验
• Python或Java是必备的!包括它们的标准数据处理库。
• 熟练使用Apache Spark和Flink等分布式数据框架来创建和排查数据管道。
• 在使用关系型数据库(基于云的服务)、熟练使用SQL、数据仓库和ETL/流水线设计方面有背景。
• 在将数据从核心平台集成到集中式数据仓库或数据湖中方面有成功的经验。
• 对代码质量、自动化测试和遵循工程最佳实践有强烈的承诺。
• 在建立处理高度敏感数据的安全系统和访问模型方面有经验。
• 出色的跨功能沟通技巧,能够提取需求并设计共享数据集。
• 对创建增强用户体验的优秀工具有真正的热情。
对您的好处:
• 有竞争力的薪资
• 灵活的工作时间
• 职业发展机会