数据工程师

2天前全职
89.7万 - 125.6万 / 年 beBeeData

beBeeData

location 芝加哥
unsaved
职位: 作为数据架构师,您将在开发和实施数据管理框架方面发挥关键作用,以确保组织内的数据流畅通无阻。 主要职责: • 设计和实施数据工程管道,包括使用 AWS 服务进行数据获取、摄取、处理和发布。 • 开发和优化数据库模型,以存储和检索公司信息。 • 确定战略数据需求,并根据这些需求创建高层设计。 • 与利益相关者合作,解决与 AWS 服务配置、性能、安全合规性、数据质量和数据检索相关的问题。 • 为数据工程管道创建架构和高层设计文档。 • 设计 DevOps 和 DataOps 管道,并解决实施和执行问题。 • 探索数据获取机会并提供建议。 要求: • 在金融领域具有专业知识。 • 能够为分析用例在数据湖和数据仓库中建模数据。 • 精通在 AWS 和 Snowflake 中设计数据存储、数据转换、数据安全、数据质量和性能优化技术。 • 具有为批处理、流处理、API、消息队列和实时数据源架构和实施数据管道的经验。 • 能够处理结构化、半结构化和非结构化数据。 地点:芝加哥,IL