高级数据平台工程师
职位概述:
我们的团队正在寻找一位经验丰富的高级数据平台工程师加入我们的小型数据平台团队。
• 扩展我们工程师、分析师和研究人员在管理和访问数据时所依赖的核心组件和 API。
• 在云原生的、基于 Kubernetes 的生态系统中工作。
• 支持大规模数据访问 API、公司范围的消息总线,并在 Iceberg 上构建新的综合数据访问 API。
职责:
• 设计、开发和维护强大、设计良好、经过严格测试和详细文档化的软件系统。
• 与团队合作,贡献产品和平台愿景。
• 关注行业/开源趋势。
要求:
• 专业软件开发经验:6 年以上。
• 至少精通 2 种面向对象编程语言,包括 Python 或 Golang 的丰富经验。
• 对 SQL 有深入理解,包括 OLAP 和 OLTP 数据库系统。
• 具备数据湖的经验,最好对 Iceberg 有了解。
• 熟悉目录和元数据管理。
• 深刻理解在云环境中管理应用程序和基础设施,并具有丰富的 Kubernetes 经验。
• 熟练掌握基本的 DevOps 实践,包括持续集成/持续部署 (CI/CD) 和基础设施即代码。
• 对云环境有一定了解,优先考虑熟悉 AWS 的候选人。
• 具备自我启动的心态、实验技能,并能在快节奏、敏捷的环境中蓬勃发展。