高级数据工程师

旧金山 1个月前全职 网络
85.6万 - 99.8万 / 年
职位概述 我们正在寻找一位高级数据工程师加入我们在 Anywhere 的团队。您将构建高性能、可扩展的数据解决方案,以满足数百万代理、经纪人、购房者和卖家的需求。 主要职责 • 设计、开发和测试强大、可扩展的数据平台组件。 • 与产品工程师合作,了解他们的数据管道需求,并提出创新解决方案。 • 与产品经理和设计师合作,帮助定义新的数据产品和功能。 要求 • 计算机科学、工程或相关技术学科的学士/硕士学位,或等效的培训和经验组合。 • 5年以上核心 Scala/Java 经验:构建业务逻辑层和高吞吐量/低延迟/大数据管道。 • 3年以上使用 Apache Flink 或 Apache Spark 进行大规模实时流处理的经验,具备 Kafka/Pulsar 等消息基础设施。 • 5年以上数据管道开发、ETL 和结构化及非结构化数据处理的经验。 • 3年以上使用 NoSQL 系统(如 MongoDB、DynamoDB)和关系 SQL 数据库系统(如 PostgreSQL)及 Athena 的经验。 • 具备使用 Lambda、API Gateway、AWS Fargate、ECS、CloudWatch、S3、DataDog 等技术的经验。 • 具备拥有和实施技术/数据解决方案或管道的经验。 • 具备优秀的英语书面和口头沟通能力。 • 具备强烈的职业道德和企业家精神。