高级大数据工程师

14个月前全职
9K - 11K USD / 月 Intellect Minds Pte Ltd

Intellect Minds Pte Ltd

location 新加坡
unsaved
**资格和经验**: - **计算机科学基础**:至少拥有计算机科学或相关学位的学士/硕士学位,并具有持续学习的强烈道德观。 - **商业软件工程**:您具有6至10年的专业软件开发经验,熟练掌握Python、PySpark、Java和版本控制(git),具有良好的分析和调试能力。 - **大数据**:您具有丰富的数据分析经验,并熟悉Google Cloud、Big Query、Data Flow、Hadoop生态系统、HDFS、Spark等大数据基础设施。您经常构建处理千兆字节/太字节数据的数据流水线,并了解操作如此大型数据集的挑战。 - **数据建模**:对数据、模式、数据模型、PL/SQL、星型和雪花模式有独特的理解,了解为了有效查询数据进行分析而提高数据建模效率的重要性,并掌握TDD的关键性并开发数据验证技术。 - **实时系统**:了解内存数据库、NoSQL和索引技术的发展,以及在Google pub/sub、GCP技术、Kafka、Storm、Spark Streaming等实时和流处理系统上的经验。 - **强大的设计能力**:在大型/高度复杂项目中取得成功的良好设计能力,最好是在企业应用和集成方面的项目。 - **项目管理**:展示出色的项目和时间管理技巧,熟悉JIRA中的Scrum或其他敏捷实践。 - **出色的口头和书面沟通技巧**:必须能够与团队成员和其他功能团队成员有效沟通和合作,以协调和完成交付物。 - **必须具备的技能**: - **商业软件工程** Python、版本控制(git)、分析和调试技能PySpark、Java。 - **大数据**。 Google Cloud Platform、Big Query、Data Flow、Hadoop生态系统、HDFS、Spark。 - **数据建模** 数据建模、PL/SQL、星型和雪花模式设计、内存NoSQL和索引技术。 - **实时系统** Google pub/sub、GCP技术、Kafka、Storm、Spark Streaming。 • **薪资**:每月$9,000.00 - $11,000.00 • **福利**: - 健康保险 工作时间: - 白天班