数据工程师 Scala,AWS,Spark - 重要娱乐公司

16个月前全职
Dice

Dice

location 纽约
unsaved
Dice是每个职业阶段的技术专家的领先职业目的地。我们的客户TechLink Resources正在寻找以下职位。立即通过Dice申请! 寻找熟悉Scala、Spark、AWS和面向对象编程的软件/数据工程师。该团队隶属于广告平台团队,您将负责实时和批处理的大规模数据平台。 职责: • 构建用于实时和批处理的大规模数据平台组件,并拥有大数据应用程序的功能,以适应不断变化的业务需求 • 构建下一代基于云的大数据基础架构,用于批处理和流数据应用程序,并不断提高性能、可扩展性和可用性 • 贡献最佳的工程实践,包括设计模式的使用、CI/CD、代码审查和自动化测试 • 参与开创性创新,并应用最先进的技术 • 作为团队的重要成员,为软件生命周期的各个方面做出贡献:设计、实验、实施和测试。 • 在开放和创新的环境中与项目经理、产品经理、SDET和研究人员合作 技能: • 计算机科学或电子工程学士及以上学历 • 4年以上Java、Scala、Python等专业编程经验 • 3年以上大数据开发经验,熟悉Spark、Flink、Singlestore、Kafka、Nifi和AWS大数据技术栈 • 系统、应用设计和架构知识 • 构建行业级高可用和可扩展服务的经验 • 对技术充满热情,并愿意进行跨学科工作 优选技能: • 处理PB级大量数据的经验 • 熟悉云基础架构技术,包括Terraform、K8S、Spinnaker、IAM、ALB等 • 熟悉ClickHouse、Druid、Snowflake、Impala、Presto、Kinesis等技术。 数据工程师 Scala、AWS、Spark - 主要娱乐公司