后端工程师(数据)

新加坡 1个月前全职 网络
面议
该职位已过期,不再接受申请。
关于公司 ✨ 强调工作与生活的平衡✨ 稳定且低流动率的团队✨ 积极的团队文化 关于职位 这是我们大数据组织中新成立团队的一个职位,旨在推动多个全新项目。主要重点是开发一个数据结构平台,该平台提供跨不同数据存储的统一API访问,支持大规模高并发工作负载,满足亚秒级延迟要求。 职责 • 为数据结构平台设计和实施核心路由和查询执行引擎 • 开发跨异构数据存储(Kafka、MySQL、Flink、Delta/Iceberg)的强大连接管理基础设施 • 工程化端到端请求管道,优化P99延迟目标和高吞吐量要求 • 设计和实施容错系统,包括错误处理、重试机制和断路器模式 • 建立综合的可观测性框架,结合结构化日志、分布式追踪和指标收集 • 推动API设计决策,并与跨职能利益相关者定义服务合同 资格 • 至少3年在生产环境中使用C++、Go或Rust开发低延迟、高吞吐量服务的专业经验 • 在并发模式、异步I/O、连接池管理和背压处理机制方面表现出专业知识 • 在生产环境中使用Kafka、MySQL、Apache Flink、Delta Lake/Iceberg的经验 • 在优化低延迟要求(P99)系统方面有成功记录 • 在大规模使用gRPC、协议缓冲区或等效RPC框架设计和实施服务方面有丰富经验 • 展示了部署和操作管理10万+并发连接的服务,并具有全面的可观测性基础设施的经验 优先技能 • 具有查询解析、优化和抽象语法树(AST)操作的经验 • 具有自适应速率限制或断路器模式的实施经验 • 了解零拷贝技术、内存映射I/O或其他高级性能优化策略 • 在流处理框架和实时数据管道架构方面有背景知识