来自斯莱戈软件解决方案有限公司的问候！！
我是来自斯莱戈的阿肖克。我们与客户有一个迫切的需求，需要一名Spark/Python开发人员。
职位：Spark/Python开发人员
地点：N/A，纽约
时长：6个月
客户：Spruce Technology Inc - 新墨西哥州政府
客户ID：SPR-069 BF
回复截止日期：02/01/24 5:00 PM
您好，
来自斯莱戈软件解决方案有限公司的问候！！
斯莱戈是一家软件开发和IT咨询公司。我们拥有约100多名IT合作伙伴，与我们的尊贵客户在IT、银行、医疗保健和政府等多个领域合作。
我们与客户有一个迫切的需求，需要一名Spark/Python开发人员。
角色：Spark/Python开发人员
地点：N/A，纽约
时长：6个月
客户：Spruce Technology Inc
客户工作ID：SPR-069
职责
• 使用Spark、Python、AWS Glue和Snowflake设计、实施和维护可扩展的数据管道解决方案
• 使用Spark和Python开发和部署高性能的ETL过程，从各种来源摄取数据并加载到Snowflake中
• 使用Spark、Python和SQL编写高效、可维护和可扩展的数据转换代码
• 与团队成员合作开发、测试和维护数据管道解决方案
• 通过调优、缓存、分区和索引技术优化数据处理性能
• 监控和解决与数据管道相关的问题，确保数据质量和完整性
• 开发和维护有关数据管道架构、流程、数据流和数据字典的文档
强制要求
• 经验（9+年）
要求
• 必须具备扎实的Spark经验
• 必须具备Python的专业知识
• 必须具备AWS云平台的专业知识
• 具备数据管道概念和最佳实践知识
• 具备AWS Glue和Snowflake的经验者优先考虑
• 熟练掌握SQL和数据库概念，能够优化查询和数据处理性能
• 较强的解决问题和分析能力
• 出色的沟通和协作能力，能够在团队环境中有效工作
附加技能
• 具备其他云平台（如Azure或Google Cloud）的经验
• 具备Java/Scala知识者优先考虑
prakashini.nakka@sligosoft.com 
洛杉矶