职位概述
薪水
每月新加坡元8,000至11,000元
职位类型
资历
领导
经验年限
至少8年
技术堆栈
ETL MariaDB Docker 数据提取 play Shell 脚本 分析 Sqoop Dataiku Cloudera HDFS Shell Java Hive Airflow Spark Bitbucket SQL Scala Hadoop Python
职位描述
工作目标
在大东方，我们正在建立一个数据平台，以实现我们的数据的全部价值。我们正在寻找一名运营人员加入我们的集团数据部门。
这个角色的主要目的是设计、构建和维护所需的系统和流程，以高效、可靠和安全的方式管理和分析大量数据。这涉及与数据科学家、数据工程师和数据分析师等其他团队合作，确保数据按时处理、转换和交付，以满足业务需求。
这是一个需要技术专业知识的实践角色，包括数据摄取、转换、存储和报告等数据和分析服务的交付，并努力不断发展新的和改进的数据工程能力，包括数据平台监控和运营、大数据平台、数据科学平台和领先的商业智能和可视化产品的管理，以及利用各种数据运营、数据仓库和系统管理方法和学科。
工作内容
• 推动优化、测试和工具化，提高数据质量，并审查数据管道的解决方案设计
• 设计、创建和维护最佳的数据管道解决方案，以满足业务、技术和用户需求。
• 确保所提出的解决方案与大数据架构准则和路线图保持一致。
• 支持数据景观和开发最佳实践。
• 参与平台创新的概念验证，并有效地将这些概念过渡和扩展到生产规模。
• 为平台增强、容量管理、性能监控、故障排除和解决技术问题做出贡献。
• 确定、设计和实施流程改进，包括自动化手动流程和优化数据交付。
• 对数据和数据管道负责，确保符合数据标准、架构标准和业务需求。
• 简化基于数据和数据分析的应用程序的设计、开发和维护。
• 对商业智能、分析和业务应用程序提供临时支持和系统支持。
• 参与数据管道、部署、测试、发布、安全和监控流程的管理和自动化。
• 参与数据生态系统中分析系统的实施、升级、更新、补丁、增强和定制。
• 评估并充分利用大数据平台，特别是Cloudera Data Platform CDP、AI/ML平台Dataiku、MariaDB和Tableau。
• 提高数据资产的性能、安全性和组织性。
• 鉴定并推荐需要的硬件、软件和服务升级。
• 监控和改善跨数据生态系统的分析系统的性能、效率、效果和编排。
• 根据适用的政策和程序，提供对分析系统和数据资产的访问权限。
• 参与制定标准、程序、设计模式和技术框架。
• 在考虑业务和合规风险时承担责任，并采取适当措施减轻风险。
• 保持对法规合规、新兴威胁和技术的行业趋势的认识，以了解风险并更好地保护公司。
• 强调任何潜在的关注/风险，并主动分享最佳的风险管理实践。
我们的要求
计算机科学、软件工程、商业分析或等同学士学位，具有8年以上大数据Hadoop等分布式系统经验。
• 精通Hadoop：具有Cloudera Data Platform CDP（Spark、HDFS、Hive、Sqoop、Airflow、Docker）的经验
• 管理数据基础设施：具备监控数据平台基础设施和处理事故的经验。
• SQL知识：具有MariaDB或其他关系型数据库管理系统的经验。
• ETL经验：具备设计和实施ETL过程的经验，包括从各种来源提取、转换和加载数据到集中的数据仓库。
• 编程技能：具备Python、Java或Scala等一种或多种编程语言的经验，并能够为数据操作和监控开发自定义的Shell脚本和应用程序
• 数据仓库：对数据仓库概念有良好的理解，包括数据架构、维度建模和ETL过程。
• 分析技能：他们应该能够分析复杂的数据集，识别模式，并制定支持业务决策的见解。
• DevOps经验：具备DevOps工具和环境（BitBucket、Jira、Bomboo）的经验
• 敏捷方法经验
• 擅长用户需求收集、维护和支持
• 能够分析和理解复杂问题
• 协作能力：与数据分析师、数据工程师、数据科学家和其他利益相关者紧密合作，了解他们的数据需求并提供解决方案。应具备良好的沟通和协作能力。
• 高度诚信，对工作负责，并具有良好的团队合作态度。
• 积极主动改进现状，并适应接受新的变化。
关于大东方
大东方成立于1908年，将客户置于我们所做的一切之中。我们的传统超越了我们的产品和服务，体现在我们的文化中，这是由我们的核心价值观和我们的工作方式所定义的。作为诚信、主动和参与的倡导者，我们的核心价值观充当了指南，引导和激励我们拥抱与每个价值观相关的行为，为我们的客户承诺 - 以可持续的方式继续为他们做出最好的。
我们与利益相关者合作，寻找能够体现或具有潜力体现我们核心价值观和相关行为的候选人，因为这些是我们从员工那里期望的关键特质，他们在与我们共同发展事业的过程中将这些特质发扬光大。
我们拥抱包容性，给予所有员工平等的机会去展示自己的才能，并在探索可能性以提供创新保险解决方案的过程中发挥自己的作用。
自2018年以来，大东方一直是联合国可持续保险原则的签署方。我们的可持续发展方法围绕环境、社会和治理（ESG）考虑因素在每个业务决策中发挥着关键作用。我们致力于成为一个以可持续发展为驱动的公司，通过管理我们运营的环境足迹和将ESG考虑因素纳入我们的投资组合，改善人们的生活，积极帮助客户过上更健康、更好、更长寿的生活，并通过实施ESG风险管理来推动负责任的商业行为。
对于所有招聘机构：大东方不接受未经请求的代理商简历。请不要将简历转发到我们的电子邮件或我们的员工。我们不会对与未经请求的简历相关的任何费用负责。 
新加坡