Resource 1 需要一位高级数据工程师,提供全职/永久职位,工作地点在伊利诺伊州纳珀维尔。候选人必须是伊利诺伊州当地居民,因为未来预计会有混合现场工作。我们的客户是一家员工持有的公司,提供优越的福利、成长机会和利润分享奖金。
该职位专注于构建现代数据管道、集成和后端数据解决方案。选定的个人将与跨职能的敏捷团队合作,与产品负责人、业务分析师和其他工程师协作,设计和交付推动商业洞察和人工智能产品的数据解决方案。
职责:
• 设计和开发可扩展的数据管道,用于数据摄取、转换和集成,使用 AWS 服务。
• 从 PostgreSQL 和 SQL Server 提取数据并迁移到 AWS。
• 在 AWS 中创建和修改作业,并修改 SQL Server 中的逻辑。
• 在 PostgreSQL 和 RedShift 中创建 SQL 查询、存储过程和函数。
• 根据需要提供数据建模和架构设计的建议。
• 通过基础设施即代码模板(无服务器框架)管理基础设施,支持 AWS 中的新数据产品和服务。
• 支持入站/出站数据流,包括 API、S3 复制和安全数据。
• 根据需要协助数据可视化/报告。
• 遵循敏捷开发方法,定期举行工作坊和站立会议,进行为期两周的冲刺。
资格:
• 5 年以上数据工程经验。
• 具有 AWS 及其相关产品(Glue、Redshift、Athena、S3、Lambda、Spectrum)的经验。
• 精通 SQL、Python 和 PySpark。
• 具有供应链、物流或分销背景者优先。
• 有 Power BI 经验者优先。