一家公司正在寻找一名Spark解决方案架构师(Secret - TS / SCI - 远程)。
主要职责:
设计和实施使用Apache Spark的可扩展数据管道和架构
优化Spark作业以提高大型数据集的性能和效率
与客户合作以了解需求并提供技术解决方案
资格要求:
需要计算机科学或相关领域的学士学位
至少5年数据工程和解决方案架构经验
在Apache Spark和性能优化技术方面具有丰富的专业知识
精通SQL并具有数据仓库和查询优化经验
熟悉Python或Scala编程语言