数据工程主管(全球安全)

2个月前全职
面议 Royal Bank of Canada

Royal Bank of Canada

location 多伦多
unsaved
职位概述 职位描述 这个机会是什么? 在RBC,我们的数据工程团队增强了对公共云和应用安全领域资产的可见性。我们的使命是提供清晰的数字基础设施洞察,从而有效识别和管理安全风险。我们利用行业领先的工具,如Databricks、Python、PySpark和Tableau,将数据转化为战略资产。我们的方法超越了传统的安全,通过分析复杂的数据集生成可操作的商业洞察,从而增强我们的网络韧性。合作是我们成功的关键,培养创新环境,让团队成员利用他们的叙述和技术技能推动云安全的持续进步。 你将做什么? • 在Azure Databricks中设计、开发和维护端到端的数据管道,使用Spark(SQL、PySpark)高效转换大数据集。 • 使用Databricks Workflows或Apache Airflow开发和优化ELT/ETL工作流,确保数据的完整性、质量和可靠性。 • 设计和管理Delta Lake解决方案,以实现数据版本控制、增量数据加载和高效数据存储。 • 与跨职能团队合作,理解数据需求,创建稳健的数据模型,并提供可操作的洞察。 • 通过构建自动监控、警报和事件管理解决方案,实施数据管道的站点可靠性工程(SRE)实践,以确保数据的可靠性、可用性和性能。 • 应用数据治理最佳实践,使用Unity Catalog确保合规性,实现访问管理和数据血缘追踪。 • 监控、排除故障并优化Spark作业的性能,解决数据管道瓶颈,确保成本效率。 • 使用Terraform实施基础设施即代码解决方案,实现自动化资源配置和管理。 • 开发和维护数据管道、转换和数据模型的全面文档。 • 为初级工程师提供指导和技术支持,培养数据工程学习和最佳实践的文化。 你需要什么才能成功? • 计算机科学、数据工程或相关领域的学士或硕士学位。 • 6年以上数据工程经验,为大型企业提供关键业务软件解决方案,并拥有持续成功的记录。 • 在Databricks(Delta Lake、Unity Catalog、Lakehouse架构、表触发器、Delta实时管道、Databricks运行时、集群管理等)方面有强大的专业知识。 • 熟练掌握Azure云服务。 • 对Spark和PySpark在大数据处理中的应用有扎实的理解。 • 英语流利,口头和书面均可。 • 了解SCM、基础设施即代码和CI/CD管道。 附加条件 • Databricks认证(例如,Databricks认证数据工程师,Spark工程师)。 • 接触Kubernetes、Docker和Terraform。 • 对商业智能和报告工具有深刻理解。 • 熟悉网络安全概念。 你能得到什么? 我们在挑战中茁壮成长,努力成为最优秀的团队,保持进步的思维以不断成长,并共同努力提供可信的建议,帮助我们的客户蓬勃发展,社区繁荣。我们关心彼此,追求潜力,为我们的社区做出改变,并实现互惠的成功。 • 综合的总奖励计划,包括奖金和灵活福利,具有竞争力的薪酬、佣金和股票(如适用)。 • 支持你发展的领导者,通过指导和管理机会。 • 在一个动态、协作、进步和高绩效的团队中工作。 • 世界一流的金融服务培训计划。 • 有机会从事具有挑战性的工作。 • 有机会承担逐步增加的责任。 • 有机会与客户建立紧密关系。 #LI-Hybrid #LI-Post #LI-PK 职位技能 大数据管理、云计算、数据库开发、数据挖掘、数据仓库(DW)、ETL处理、团队问题解决、质量管理、需求分析 额外职位详情 地址: 330 FRONT ST W:TORONTO 城市: 多伦多 国家: 加拿大 每周工作小时: 37.5 就业类型: 全职 平台: 技术与运营 职位类型: 常规 薪酬类型: 薪资制 发布日期: 2025-05-27 申请截止日期: 2025-06-15 注意:申请将在申请截止日期前一天的晚上11:59接受 包容性与平等机会就业 在RBC,我们相信拥有多样化视角的包容性工作场所是我们持续成长的核心,作为全球最大和最成功的银行之一。维护一个让我们的员工感到支持的工作环境,能够发挥最佳表现,有效协作,推动创新,促进职业成长,有助于实现我们的使命,为客户和社区创造价值。RBC努力通过旨在促进尊重、归属和机会的政策和项目来实现这一目标。 加入我们的人才社区 随时了解RBC的优秀职业机会。注册并获取关于我们最新职位、职业建议和与你相关的招聘活动的定制信息。 在RBC拓展你的极限,共同创造新的未来。了解我们如何利用激情和动力来提升客户和社区的福祉,访问jobs.rbc.com。