副总裁,大数据工程师,数据技术,技术与运营

新加坡 10天前全职 网络
面议
业务职能 集团技术与运营(T&O)通过战略性关注生产力、质量与控制、技术、人员能力和创新,为银行提供高效、灵活和韧性的基础设施,赋能并支持银行的运营。在集团T&O中,我们管理银行大多数的运营流程,并通过多种银行交付渠道激励并满足我们的业务合作伙伴。 我们正在寻找一名大数据工程师,负责开发使用Spark和Spring Boot微服务的框架,以创建用于收集、存储、处理和分析大量数据的作业。主要关注选择最佳解决方案以满足这些目的,然后进行维护、实施和监控。您还将负责将这些解决方案与公司所使用的架构进行集成。 职责 • 实施所需的大数据工具和框架,以提供所请求的能力。 • 与利益相关者(包括产品负责人、数据和设计团队)合作,协助解决数据相关的技术问题,并支持他们的数据基础设施需求。 • 支持客户实施ETL流程。 • 监控性能并建议任何必要的基础设施更改。 要求 • 计算机科学或相关领域的学士学位。至少7年的IT经验,其中至少5年在类似职位的经验,理想情况下是在大数据工具方面。 • 熟练理解分布式计算原理。 • 在Hadoop、Spark、Iceberg和Spring Boot方面有丰富经验。 • 有构建流处理系统的经验,使用如Spark-Streaming等解决方案。 • 熟悉大数据查询工具,如Pig、Hive和Impala。 • 有从多个数据源集成数据的经验。 • 具备NoSQL数据库的经验,如HBase、Cassandra、MongoDB。 • 了解各种ETL技术和框架。 • 有使用各种消息系统的经验,如Kafka或RabbitMQ。 • 熟悉大数据机器学习工具包,如Mahout、SparkML或H2O。 • 良好理解Lambda架构及其优缺点。 立即申请 我们提供具有竞争力的薪资和福利套餐,以及支持您发展的动态环境的职业优势,认可您的成就。