角色名称: 数据工程师
工作地点: 多伦多
职位类型: 混合模式(每周现场工作2-3天,从九月开始)
合同期限: 合同
面试要求: 必须与客户进行面对面面试
职位描述:
• 使用 Python 和 PySpark 开发和维护后端系统,确保高性能、可扩展性和可靠性。
• 使用 PySpark 设计和实施数据工程和 ETL 管道。
• 与跨职能团队合作,定义和优先考虑项目需求。
• 指导工程师并进行代码审查,以维护质量标准。
• 关注新兴技术,并将其融入以改善系统。
• 主导技术架构、设计和实施工作。
• 与产品负责人合作,对齐需求和优先事项。
• 创建和维护技术文档、架构图和规格说明。
• 参与代码审查,确保遵循编码标准。
• 与 DevOps 和运营团队协调进行部署和维护。
• 利用 DevOps 工具和实践进行 CI/CD 管道。
• 愿意学习新技术并适应挑战。
• 在指导技术团队方面有证明的领导能力,包括指导和辅导。
• 强大的技术决策能力、任务优先级和资源管理技能。
• 出色的沟通和团队合作能力。
• 通过研究和评估新解决方案推动技术创新。
• 有效的问题解决能力,能够进行调试、性能优化和质量保证。
• 具有 Agile 方法论(如 Scrum 或 Kanban)的经验。
• 具有 AWS、Azure 或 GCP 等云平台的经验。
• 具有使用 PySpark 进行数据工程和 ETL 管道的经验。
• 了解容器化(Docker)和编排(Kubernetes)。