数据工程师 - Scala / Java

16个月前合同
90 - 95 USD / 时 Eliassen Group

Eliassen Group

location 纽约
unsaved
• 纽约市混合型工作:4天在现场* 我们的客户的广告智能团队正在通过电视和流媒体视频的数据和人工智能改变广告和他们的广告平台。他们构建解决方案来衡量和优化广告生命周期的每个方面。他们的目标是组建一个强大的跨领域团队,提供从机器学习、大数据、微服务到数据可视化等技术领域的端到端解决方案。他们正在寻找两名高级软件工程师加入他们的广告数据平台工程团队。这个工程团队专注于大数据基础设施、运营数据、受众解决方案、库存预测和全漏斗测量,作为他们可寻址广告平台的基础层。 由于客户要求,申请人必须愿意并能够以w2方式工作。对于我们的w2顾问,我们提供了一套完善的福利待遇,包括医疗、牙科和视力福利、与公司相匹配的401k计划以及人寿保险。 费率:$90 - $95 /小时 w2 职责: • 使用主要的Scala进行数据工程工作-批处理-将使用spark编写、数据提取和数据清洗;所有的管道都是用Scala开发的- • 为实时和批处理构建大规模数据平台的组件,并拥有大数据应用的特性,以适应不断发展的业务需求 • 为批处理和流数据应用构建下一代基于云的大数据基础设施,并不断改进性能、可伸缩性和可用性 • 贡献最佳的工程实践,包括设计模式、CI/CD、代码审查和自动化测试 • 参与开创性创新,并应用最先进的技术 • 贡献到软件生命周期的各个方面:设计、实验、实施和测试。 • 在开放和创新的环境中与项目经理、产品经理、SDET和研究人员合作 要求: • 计算机科学或电子工程学士或以上学历 • 4年以上Java、Scala、Python等专业编程经验。 • 3年以上大数据开发经验,熟悉Spark、Flink、Singlestore、Kafka、Nifi和AWS大数据技术等技术栈 • 系统、应用设计和架构知识 • 构建行业级高可用和可扩展服务的经验 • 对技术的热情,对跨学科工作的开放态度 技术技能必备: • Scala / Java-Scala是最重要的,Java是第二重要的 • 大数据-Spark是最优先考虑的,因为团队使用Spark和Flink • 必须具备编程经验-从软件开发角度来看,具备面向对象的经验 首选资格: • 处理PB级数据的经验 • 具备云基础设施技术的能力,包括Terraform、K8S、Spinnaker、IAM、ALB等 • 熟悉ClickHouse、Druid、Snowflake、Impala、Presto、Kinesis等 • 具备广泛使用的Web框架(React.js、Vue.js、Angular等)和对Web技术栈HTML、CSS、Webpack的良好知识 在确定工资水平时,将考虑技能、经验和其他可补偿因素。本职位提供的工资范围反映了w2小时工资率;可能还有其他就业选择可提供超出提供范围之外的工资。 Eliassen Group的w2员工,每周定期工作30小时或更多,有资格享受以下福利:医疗(可选择3种计划)、牙科、视力、税前账户、其他自愿福利,包括人寿和残疾保险、401(k)匹配和根据工作所在州/地区的法律要求的病假。 请注意-如果有人与您联系,与Eliassen Group有关的开放职位,请确认他们是否有Eliassen.com的电子邮件地址,并且永远不要向与Eliassen Group没有明确关联的任何人提供个人或财务信息。如果您有任何欺诈活动的迹象,请联系InfoSec@eliassen.com。 职位编号:381295