大数据软件工程师/开发者

15个月前兼职
Last Word Consulting

Last Word Consulting

location 纽约
unsaved
职位:大数据软件工程师/开发人员 地点:最好靠近迪士尼中心的资源,如加利福尼亚州、西雅图、纽约市——必须在附近以便参加会议 工作期限:12个月以上 仅需要W2合同 必须具备Spark RDD经验。 基本要求 你将会做什么: 为实时和批处理构建大规模数据平台的组件,并拥有大数据应用的特性,以适应不断变化的业务需求 构建下一代基于云的大数据基础架构,用于批处理和流式数据应用,并持续改进性能、可扩展性和可用性 贡献最佳工程实践,包括设计模式的使用、CI/CD、代码审查和自动化测试 做出创新突破,并应用最先进的技术 作为团队的重要成员,参与软件生命周期的各个方面:设计、实验、实施和测试。 在开放和创新的环境中与项目经理、产品经理、SDET和研究人员合作 你需要具备什么: 计算机科学或电子工程学士学位或以上学历 4年以上Java、Scala、Python等专业编程经验 3年以上使用Spark、Flink、Singlestore、Kafka、Nifi和AWS大数据技术进行大数据开发的经验 了解系统、应用设计和架构 具备构建行业级高可用性和可扩展性服务的经验 对技术充满热情,并且愿意进行跨学科的工作 优先条件 处理PB级大量数据的经验 熟悉云基础架构技术,包括Terraform、K8S、Spinnaker、IAM、ALB等 熟悉ClickHouse、Druid、Snowflake、Impala、Presto、Kinesis等技术 具备广泛使用的Web框架(React.js、Vue.js、Angular等)的经验,对Web技术栈HTML、CSS、Webpack有良好的了解