数据团队负责人/数据架构师(MongoDB, Redshift, Glue)B2B SaaS

多伦多 9天前全职 网络
面议
获取由AI驱动的工作建议和更多独家功能。此范围由保密公司提供。您的实际薪酬将基于您的技能和经验——与您的招聘人员交谈以了解更多信息。基本薪资范围为CA$130,000.00/年 - CA$160,000.00/年,全职职位,带薪休假和假期+福利计划。必须是加拿大公民或加拿大永久居民。100%远程工作,需在加拿大境内(不包括魁北克)。必须在东部标准时间工作。小型B2B SaaS云软件公司(员工少于800人),正在经历高速增长,并推出尖端的AI功能。需要一位数据专家/数据团队负责人/数据架构师,能够领导他们从单体迁移到微服务。使用AWS Glue、PySpark、dbt和Python将MongoDB迁移到Redshift。这不是一个典型的高级数据工程师角色——这个新员工必须是数据迁移的实际领导者!(数据团队负责人/架构师)这位首席数据工程师/数据架构师将是团队中最高级别的数据专家,并向技术工程副总裁汇报。没有其他人。这个人必须自己引领方向,并提出如何实现的建议。这不仅仅是一个遵循命令并使用ETL迁移或现代化数据的高级工程师。必须是数据库管理和数据库管理方面的专家,尤其是MongoDB和领域数据建模。这位经验丰富的高级数据工程师将帮助引领我们数据基础设施的现代化,因为我们从紧密耦合的单体系统过渡到可扩展的微服务架构。这个角色对于解耦遗留数据库结构、实现领域驱动的服务所有权以及推动实时分析、操作智能和AI计划在我们平台上的实施至关重要。关键职责:单体到微服务的数据过渡:领导将单体数据库结构分解为领域对齐的模式,以实现服务独立性和所有权。管道开发与迁移:使用Python、PySpark/Spark、AWS Glue和dbt构建和优化ETL/ELT工作流,包括从本地和云遗留系统到数据湖和数据仓库环境的模式/数据映射和转换。领域数据建模:定义逻辑和物理领域驱动的数据模型(星型/雪花模式、数据集市)以满足跨职能需求、BI、操作、流媒体和ML。遗留系统集成:设计从嵌入逻辑和不完整规范化的遗留系统中提取、验证和重组数据的策略。数据库管理:管理、优化和扩展SQL(MySQL、Aurora、Redshift)和NoSQL(MongoDB)平台,以满足高可用性和低延迟需求。云和无服务器ETL:利用AWS Glue目录、爬虫、Lambda和S3管理和协调现代、成本效益高的数据管道。监控与优化:在Spark、Glue和Redshift工作负载中实施可观察性(CloudWatch、日志、指标)和性能调优。最低要求:10年以上数据工程经验,并在现代化遗留数据系统和推动从单体到微服务的大规模迁移方面有良好记录(准备现代化数据以便在AI模块中使用)。必须有作为实际数据负责人/数据架构师引领方向的经验。不能只是一个遵循命令的高级数据工程师。必须是一个领导者。必须能够给出方向并提出建议,并在需要时给予反馈。必须是MongoDB和Redshift的专家,并精通使用AWS Glue、PySpark、dbt和Python。必须是“非常动手”的工程师。这是一个个人贡献者角色。没有其他数据工程师。您可能会有一些离岸支持,但主要还是由此人负责迁移。必须具备良好的英语沟通能力,并能在团队环境中良好工作。职位将与解决方案架构师和领域所有者密切合作,设计反映业务背景的弹性管道和数据模型,并支持内部和外部消费者的可扩展、安全和可审计的数据访问。必须是加拿大公民或加拿大永久居民。我们不能在魁北克雇用任何人。必须住在加拿大。必须适应在员工少于800人的小公司工作。资历水平:中高级。就业类型:全职。工作职能:信息技术。行业:IT系统定制软件开发。推荐增加您在保密公司面试的机会2倍。#J-18808-Ljbffr