数据工程师

7小时前全职
107.7万 - 129.2万 / 年 Harnham

Harnham

location 旧金山
unsaved
数据工程师 地点:南旧金山地区的混合办公 每周三天在办公室,两个工作日远程办公 基础工资:$150,000 - $180,000 关于公司 这家以数据为驱动的组织在构建基础设施方面发挥着关键作用,以支持高级风险建模、监管报告和运营智能。公司专注于质量、合规性和可扩展性,与主要机构合作,处理和转换大量结构化和非结构化数据。 技术团队致力于提供强大的解决方案,支持从实时分析到长期战略洞察的一切,同时满足高标准的数据治理和性能要求。 关于角色 作为数据工程师,您将负责构建和维护可扩展的高性能数据管道和基础设施。您将设计工作流程,从内部和外部来源获取、清理和转换数据,使其可供数据科学家、分析师和工程师下游使用。 这是一个动手的角色,您的工作将直接支持信用风险模型、报告工具和数据驱动应用程序的开发。您将跨团队合作,确保组织的数据基础安全、高效,并为扩展做好准备。 角色职责 • 设计和维护结构化和非结构化数据的ETL/ELT管道 • 整合来自金融机构、信用局和内部系统的数据 • 管理和优化数据湖、数据仓库及相关基础设施 • 与分析和数据科学团队合作,提供干净、可靠的数据集 • 监控系统性能并调整查询以提高速度和可扩展性 • 自动化手动工作流程并为长期平台可扩展性做贡献 • 确保遵守数据治理和监管标准 关键技能要求 • 4年或以上数据工程或类似角色的经验 • 精通Python,并具有大规模数据系统的经验 • 拥有使用数据仓库工具(如Snowflake、Redshift或BigQuery)的动手经验 • 熟悉ETL编排工具,如Airflow • 有云环境工作经验,尤其是AWS 如果您对这个职位感兴趣,请申请该职位并发送电子邮件至Emma Spagnola,邮箱为emmaspagnola@harnham.com。请附上简历和一段简短的说明,说明您为何适合该职位。谢谢!