高级数据工程师
精通 Python 和 Pyspark
擅长数据结构和算法
本地在湾区
必须有1天现场办公，地点：加州奥克兰/加州圣拉蒙
要求15年以上经验
W2 / C2C
职责
- 利用流行的开源软件、AWS 和 GitLab 自动化开发和增强数据处理、编排、监控等。
- 与产品和技术团队合作，设计和验证数据平台的功能
- 识别、设计和实施流程改进：自动化手动流程、优化可用性、重新设计以实现更大的可扩展性
- 为我们平台服务的用户提供技术支持和使用指导。
- 推动指标、监控和警报机制的创建和完善，以提供我们对生产服务所需的可见性。
资格
- 在分布式环境中构建和优化数据管道的经验
- 支持和与跨职能团队合作的经验
- 熟练在 Linux 环境中工作
- 熟悉 SQL、Python 和 PySpark
- Git/Bitbucket、Jenkins/CodeBuild、CodePipeline
