我们正在招聘一名高级大数据工程师,该工程师将支持EPAM的一位重要客户的关键数字转型项目。这是一个具有高影响力的角色,有机会提升您的技能并在全球组织中发展。如果您想了解更多关于这个职位和项目的信息,请立即申请!今天就与招聘人员联系!
职位编号:564243983
职责
• 评估不同的技术并建议适合客户需求的技术
• 完成概念验证,并将其发展成为可投入生产的解决方案
• 选择和集成所有需要提供所需功能的大数据工具和框架
• 实施ETL流程
• 监控性能并建议任何必要的基础设施更改
• 定义数据保留策略
• 对新功能的技术设计进行详细阐述
要求
• 在Java EE或Scala中具有4年以上的编程和脚本编写经验
• 有Spark、SQL和Bash的经验
• 有处理来自各种来源的大量结构化和非结构化数据的经验
• 能够处理数据规模和性能/扩展性问题
• 对数据的读取有很好的理解(文件格式、分区、分桶)
• 在Spark(或等效)框架下编写可测试的作业的丰富经验
• Web服务和API标准:REST、OAuth和JSON
• 软件架构(微服务、事件驱动、点对点)
• 应用程序安全性
• 异步发布-订阅和点对点消息传递系统
• 如果您有ETL和Hadoop生态系统的工作经验(HBase、Solr、Spark Streaming、Kudu、Spring Boot、Spring Context、Spring Data Rest、Cloudera的一般经验),则具有优势
• 在Hadoop生态系统中进行流处理是一个加分项
福利待遇
• 延长医疗保险,包括处方药、牙科和视力保险以及医疗支出账户(公司支付)
• 产假/父母/收养假补贴
• 寿险和意外身故及伤残保险(公司支付)
• 员工援助计划(公司支付)
• 无限制访问LinkedIn学习解决方案
• 长期残疾保险
• 公司匹配的注册退休储蓄计划(RRSP)
• 带薪休假
• 重大疾病保险
• 员工折扣
• 员工股票购买计划
关于EPAM
• EPAM是领先的全球数字平台工程和开发服务提供商。我们致力于对我们的客户、员工和社区产生积极影响。我们拥抱充满活力和包容性的文化。在这里,您将与跨国团队合作,为一系列创新项目做出贡献,提供最具创意和前沿的解决方案,并有机会不断学习和成长。无论您身在何处,您都将加入一个专注、富有创造力和多元化的社区,帮助您发掘最大的潜力。