大数据工程师
全职
多伦多/密西沙加,加拿大
现场办公
资格要求:
- 8年以上大数据技术(Spark/Hive/Hadoop)软件开发经验
- 具备Hadoop发行版工作经验,良好的核心概念和最佳实践理解
- 具备良好的Scala/Python Spark管道构建/调优经验
- 具备编写复杂Hive查询以获取关键业务洞察的经验
- 具备Java/Python/Scala编程经验
- 具备AWS云经验,了解Lambda/EMR/Kinesis为佳
- 具备NoSQL技术经验 - MongoDB, Dynamo DB
角色和职责:
- 设计和实施解决方案以解决大规模数据处理中的问题
- 参与/主导与多个利益相关者的各种架构、设计和状态会议
- 确保对所有任务的端到端所有权
- 设计、构建和维护高效、可重用和可靠的代码
- 测试实施,排除故障并纠正问题
- 能够作为个人贡献者工作,也能在团队中工作
- 确保高质量的软件开发,具备完整的文档和可追溯性
- 履行组织责任(与其他团队/小组分享知识和经验)
- 进行技术培训/会议,撰写白皮书/案例研究/博客等。