关于这个职位
我们正在寻找一位技术娴熟的数据工程师加入我们的团队。该人员将负责使用 Apache Spark 和 Kafka 设计、开发和维护大规模数据处理系统。
理想的候选人应具备 Scala、Spark、Kafka 和 Cassandra 的实际操作经验。他们应该具备优秀的问题解决能力,能够在快节奏的环境中工作,并能与跨职能团队有效合作。
主要职责:
• 使用 Apache Spark 和 Kafka 设计和开发可扩展的数据管道
• 使用 Scala 和 Cassandra 开发和维护高质量、高效率的代码
• 与数据科学家和分析师合作实施数据驱动的解决方案
• 确保多个系统之间的数据一致性、完整性和安全性