数据工程师/架构师(最近使用 NoSQL 和 Redis)

多伦多 19天前全职 网络
60.4万 - 80.5万 / 年
工作地点:多伦多,安大略省/哈利法克斯,新斯科舍省(混合办公) • * 我们需要:一位资深(10年以上)数据工程师/架构师,负责设计、实施和优化强大的数据解决方案,以支持我们的应用程序、分析和报告系统。此角色要求对 SQL 和 NoSQL 技术有深厚的专业知识,具备高级数据处理能力,以及架构可扩展和安全的数据流的能力。他们将使用 Redis 和 ElasticSearch 实施和管理数据缓存解决方案,以优化性能,领导数据映射和转换项目,确保数据质量、一致性和完整性,并规划和执行系统和环境之间的数据迁移和同步策略。具有 Kafka 和/或 Solace 的事件流处理和实时数据处理的实际经验。银行或资本市场经验是一个很大的加分项,但不是必需的。 职位描述:我们正在寻找一位高技能的资深数据工程师/架构师,负责设计、实施和优化强大的数据解决方案,以支持我们的应用程序、分析和报告系统。此角色要求对 SQL 和 NoSQL 技术有深厚的专业知识,具备高级数据处理能力,以及架构可扩展和安全的数据流的能力。理想的候选人将具有实践经验,注重细节,并能够将复杂的业务需求转化为高效、可靠的数据架构。 主要职责: · 设计和开发可扩展的数据架构和处理管道,以支持业务和分析需求。 · 编写和优化复杂的 SQL 和 NoSQL 查询,以实现高效的数据检索和转换。 · 使用 Redis 和 ElasticSearch 实施和管理数据缓存解决方案,以优化性能。 · 领导数据映射和转换项目,确保数据质量、一致性和完整性。 · 规划和执行系统和环境之间的数据迁移和同步策略。 · 集成和管理数据摄取、转换和分发的 API。 · 开发和维护数据分析和报告框架,以提供可操作的洞察。 · 使用图数据库和向量数据模型,以支持高级分析和人工智能/机器学习用例。 · 创建清晰、全面的数据架构、处理工作流和数据流的图示,以便于文档记录和协作。 · 与跨职能团队(包括软件工程师、产品经理和分析师)协作,以确保无缝的数据操作。 优先技能与技术: · 具有使用 Kafka 和/或 Solace 进行事件流处理和实时数据处理的实践经验。 · 熟悉数据安全最佳实践、合规要求和治理框架。 · 具备云数据平台(AWS、Azure 或 GCP)的经验。 · 了解容器化和编排工具(Docker、Kubernetes)。 资格要求: · 计算机科学、信息系统、数据工程或相关领域的学士或硕士学位。 · 7年以上数据工程、数据架构或相关角色的经验。 · 设计和实施复杂的大规模数据解决方案的成功记录。 · 强大的分析能力、注重细节和解决问题的能力。 · 优秀的沟通能力,能够跨团队协作。 工作类型:全职、长期、固定期限合同 合同期限:12 个月 薪资:每年 $106,809.08-$140,000.00