数据工程师
地点:南旧金山地区的混合办公
每周三天在办公室,两个工作日远程办公
基础工资:$150,000 - $180,000
关于公司
这家以数据为驱动的组织在构建基础设施方面发挥着关键作用,以支持高级风险建模、监管报告和运营智能。公司专注于质量、合规性和可扩展性,与主要机构合作,处理和转换大量结构化和非结构化数据。
技术团队致力于提供强大的解决方案,支持从实时分析到长期战略洞察的一切,同时满足高标准的数据治理和性能要求。
关于角色
作为数据工程师,您将负责构建和维护可扩展的高性能数据管道和基础设施。您将设计工作流程,从内部和外部来源获取、清理和转换数据,使其可供数据科学家、分析师和工程师下游使用。
这是一个动手的角色,您的工作将直接支持信用风险模型、报告工具和数据驱动应用程序的开发。您将跨团队合作,确保组织的数据基础安全、高效,并为扩展做好准备。
角色职责
• 设计和维护结构化和非结构化数据的ETL/ELT管道
• 整合来自金融机构、信用局和内部系统的数据
• 管理和优化数据湖、数据仓库及相关基础设施
• 与分析和数据科学团队合作,提供干净、可靠的数据集
• 监控系统性能并调整查询以提高速度和可扩展性
• 自动化手动工作流程并为长期平台可扩展性做贡献
• 确保遵守数据治理和监管标准
关键技能要求
• 4年或以上数据工程或类似角色的经验
• 精通Python,并具有大规模数据系统的经验
• 拥有使用数据仓库工具(如Snowflake、Redshift或BigQuery)的动手经验
• 熟悉ETL编排工具,如Airflow
• 有云环境工作经验,尤其是AWS
如果您对这个职位感兴趣,请申请该职位并发送电子邮件至Emma Spagnola,邮箱为emmaspagnola@harnham.com。请附上简历和一段简短的说明,说明您为何适合该职位。谢谢!