职位概述
职位描述
这个机会是什么?
在RBC,我们的数据工程团队增强了对公共云和应用安全领域资产的可见性。我们的使命是提供清晰的数字基础设施洞察,从而有效识别和管理安全风险。我们利用行业领先的工具,如Databricks、Python、PySpark和Tableau,将数据转化为战略资产。我们的方法超越了传统的安全,通过分析复杂的数据集生成可操作的商业洞察,从而增强我们的网络韧性。合作是我们成功的关键,培养创新环境,让团队成员利用他们的叙述和技术技能推动云安全的持续进步。
你将做什么?
• 在Azure Databricks中设计、开发和维护端到端的数据管道,使用Spark(SQL、PySpark)高效转换大数据集。
• 使用Databricks Workflows或Apache Airflow开发和优化ELT/ETL工作流,确保数据的完整性、质量和可靠性。
• 设计和管理Delta Lake解决方案,以实现数据版本控制、增量数据加载和高效数据存储。
• 与跨职能团队合作,理解数据需求,创建稳健的数据模型,并提供可操作的洞察。
• 通过构建自动监控、警报和事件管理解决方案,实施数据管道的站点可靠性工程(SRE)实践,以确保数据的可靠性、可用性和性能。
• 应用数据治理最佳实践,使用Unity Catalog确保合规性,实现访问管理和数据血缘追踪。
• 监控、排除故障并优化Spark作业的性能,解决数据管道瓶颈,确保成本效率。
• 使用Terraform实施基础设施即代码解决方案,实现自动化资源配置和管理。
• 开发和维护数据管道、转换和数据模型的全面文档。
• 为初级工程师提供指导和技术支持,培养数据工程学习和最佳实践的文化。
你需要什么才能成功?
• 计算机科学、数据工程或相关领域的学士或硕士学位。
• 6年以上数据工程经验,为大型企业提供关键业务软件解决方案,并拥有持续成功的记录。
• 在Databricks(Delta Lake、Unity Catalog、Lakehouse架构、表触发器、Delta实时管道、Databricks运行时、集群管理等)方面有强大的专业知识。
• 熟练掌握Azure云服务。
• 对Spark和PySpark在大数据处理中的应用有扎实的理解。
• 英语流利,口头和书面均可。
• 了解SCM、基础设施即代码和CI/CD管道。
附加条件
• Databricks认证(例如,Databricks认证数据工程师,Spark工程师)。
• 接触Kubernetes、Docker和Terraform。
• 对商业智能和报告工具有深刻理解。
• 熟悉网络安全概念。
你能得到什么?
我们在挑战中茁壮成长,努力成为最优秀的团队,保持进步的思维以不断成长,并共同努力提供可信的建议,帮助我们的客户蓬勃发展,社区繁荣。我们关心彼此,追求潜力,为我们的社区做出改变,并实现互惠的成功。
• 综合的总奖励计划,包括奖金和灵活福利,具有竞争力的薪酬、佣金和股票(如适用)。
• 支持你发展的领导者,通过指导和管理机会。
• 在一个动态、协作、进步和高绩效的团队中工作。
• 世界一流的金融服务培训计划。
• 有机会从事具有挑战性的工作。
• 有机会承担逐步增加的责任。
• 有机会与客户建立紧密关系。
#LI-Hybrid
#LI-Post
#LI-PK
职位技能
大数据管理、云计算、数据库开发、数据挖掘、数据仓库(DW)、ETL处理、团队问题解决、质量管理、需求分析
额外职位详情
地址:
330 FRONT ST W:TORONTO
城市:
多伦多
国家:
加拿大
每周工作小时:
37.5
就业类型:
全职
平台:
技术与运营
职位类型:
常规
薪酬类型:
薪资制
发布日期:
2025-05-27
申请截止日期:
2025-06-15
注意:申请将在申请截止日期前一天的晚上11:59接受
包容性与平等机会就业
在RBC,我们相信拥有多样化视角的包容性工作场所是我们持续成长的核心,作为全球最大和最成功的银行之一。维护一个让我们的员工感到支持的工作环境,能够发挥最佳表现,有效协作,推动创新,促进职业成长,有助于实现我们的使命,为客户和社区创造价值。RBC努力通过旨在促进尊重、归属和机会的政策和项目来实现这一目标。
加入我们的人才社区
随时了解RBC的优秀职业机会。注册并获取关于我们最新职位、职业建议和与你相关的招聘活动的定制信息。
在RBC拓展你的极限,共同创造新的未来。了解我们如何利用激情和动力来提升客户和社区的福祉,访问jobs.rbc.com。