Lead/Principal Backend Engineer – GenAI Infra

5 days agoFull-time
150K - 200K USD / 年 Okareo

Okareo

location San Francisco
unsaved
Okareo – GenAI 的实时错误跟踪和鲁棒性 我们正在为开发人员构建一个现代平台,以便通过实时错误跟踪、强大的对抗性模拟和深度代理评估安全地部署 GenAI。实时 LLM 错误跟踪已嵌入 GenAI 开发的核心—因此团队可以即时捕捉范围违规、失败的 LLM 工具调用和在生产中发生的断流。代理评估提供了代理规划、内存管理和决策过程的可见性,以便在失败到达用户之前进行捕捉。我们帮助团队以规模部署基于 LLM 的自主代理、函数调用框架和检索增强生成 (RAG) 管道。 关于这个角色 我们正在为下一代 LLM 驱动的软件构建基础设施—我们正在寻找一位高级后端工程师来帮助引领这一方向。作为早期团队的关键成员,您将在塑造我们的产品、架构和工程文化方面发挥核心作用。如果您非常关心为其他开发人员构建产品,对现代软件开发有强烈的看法,并希望您的工作能够定义 GenAI 工具的未来,我们非常乐意与您交流。 您将做什么 • 直接与创始团队合作,定义核心产品功能和后端架构 • 全面技术拥有权和产品架构的定义,有机会利用现代技术栈的优势 • 设计和发展支持 LLM 评估、模拟和实时可观察性的基础设施,具备规模化能力 • 与客户的工程团队合作,集成到他们的 LLM 管道中并解决实际的基础设施挑战 • 确立技术基调:指导工程师,建立最佳实践,以身作则 我们在寻找什么 • 8 年以上的后端或基础设施工程经验,理想情况下构建面向开发者或平台产品 • 在高影响力项目上领导开发的成功记录,项目范围广泛 • 对云平台(GCP、AWS)有深厚经验,具备强大的系统设计基础 • 能够独立思考,快速交付,并在模糊环境中导航 • 强烈的指导本能和塑造高绩效工程文化的愿望 优先考虑 • 开源开发工具或基础设施项目的贡献者或维护者 • 具有 ML 或 LLM 基础设施的经验(模型服务、评估框架、向量数据库等) • 在显著规模上全周期开发 ML 驱动的系统 • 在可观察性栈、CI/CD 系统或 IDE/开发工具方面的背景