数据架构师

16个月前全职
Singtel Group

Singtel Group

location 新加坡
unsaved
在新电信,我们的使命是赋予每一代人力量。我们致力于培育一个公平和前瞻性的工作环境,让我们的员工感受到强烈的归属感,实现有意义的影响,并在个人和职业方面实现成长。加入新电信,您将成为一个关心、包容和多元化的团队的一部分,为所有人创造积极的影响和可持续的未来。 成为伟大事业的一部分! 该职位负责为大量电信数据集的实时和批处理架构大数据解决方案。设计和实施支持高吞吐量数据处理的API数据库。监督和管理网络数据湖迁移到新的数据中心与数据操作。 通过以下方式产生影响: • 在大数据平台上开发新的和改进现有的数据流水线(Hadoop、Hive、HBase、Clickhouse等或等效工具) • 设计和实施API数据库(MongoDB或等效工具)以支持数据REST API • 设计和实施流平台(Kafka或等效工具)以实现准实时数据流 • 管理流数据集和批处理数据集的新建和增强现有数据应用 • 管理Apache Airflow数据流水线,Python、Spark、Scala、Java等开源技术 • 管理和管理数据保护、数据安全和信息安全。 • 推动优化、测试和工具化以改善数据质量 • 设计数据平台解决方案和集成的高级和详细设计,并与数据和分析架构原则和路线图保持一致 • 与来自业务、技术、项目管理和运营的不同利益相关者合作,设计和实施解决方案。 • 确保最佳实践、框架和系统与安全控制和可靠性集成 • 能够领导项目和运营团队面临的系统集成、数据流水线操作和系统问题的故障排除。 • 理解各种数据安全标准、信息安全标准,并应用和遵守所需的用户访问数据控制 • 架构数据平台迁移和混合云解决方案 • 管理与数据平台相关的交付的服务交付,无论是来自内部开发团队还是供应商。 • 领导事故管理,并及时向管理层提供更新,对技术系统问题和根本原因分析负责 • 确保和管理数据系统更新到最新稳定的软件版本。确保系统定期进行补丁更新(操作系统、软件、固件、交换机、防火墙)- 每年半年/年度。 • 对数据平台/解决方案上正确技术进行必要的POC/试验和研发 成功所需的技能 • 工程学或信息技术学位 • 5年以上相关经验。 • 需要的技术技能: • 系统管理 • 系统集成 • 数据架构师 • 大数据和数据仓库运营。 • Hadoop和Spark(或等效工具) • Python、Linux/Unix、Ansible自动化、Shell脚本 • Kubernetes、Docker、无服务器函数、API和Kafka总线 • 网络和安全设计 • 沟通和演讲技巧 • 人员管理技能 • 良好的技术写作能力 • 出色的英语沟通和演讲技巧 超越回报 • 全套健康和福利待遇 • 持续的培训和发展计划 • 内部晋升机会 您的职业发展从这里开始。立即申请! 我们致力于为员工和客户提供安全和健康的环境,并要求所有潜在员工接种疫苗。