高级数据工程师在构建集中式数据平台和开发企业数据模型方面发挥着关键作用。他们负责设计、开发、实施和优化数据管道和存储解决方案,确保数据能够方便地进行分析和报告。高级数据工程师评估并推荐新技术,执行数据质量标准,并积极领导跨职能项目规划的技术方面。他们在数据工程和架构方面的专业知识有助于建立强大且可扩展的数据基础设施,支持组织的数据驱动目标。
你是谁
• 知识渊博、分析能力强、注重解决问题。毫无疑问,你具备强大的定量技能,能够熟练分析大型数据集,发现趋势和模式,并综合相关观察结果。你采用基于假设的方法进行分析,以回答客户的问题。你喜欢独辟蹊径,提出创新的观点来应对新的挑战,依靠以往的分析工作和经验来指导你的思路。
• 以结果为导向。你展现出驱动出色结果的紧迫感,同时在执行工作时精确无误。你擅长创建和传达清晰的项目计划,跟踪进展,并在整个过程中与业务伙伴保持沟通。
• 学问广博。你对“为什么”本能地感兴趣,以便能够找到代表解决问题的非传统解决方案的机会。
• 沟通能力强。你的写作和口头表达能力简明、清晰、有效,能够与组织内各级别/各团队进行互动,被理解,并在组织内建立信任和融洽的关系。
• 技术娴熟。你精通SQL,并具备一种或多种通用编程语言(Python、Java、Scala、C++)的强大技能。
• 值得信赖的团队合作者。你喜欢与他人合作,并建立建设性的工作关系,以促进合作,取得出色的结果。你对队友负责,并践行承诺。
• 有组织能力和自信。你灵活、沉着,能够同时优先处理多个任务和截止日期,同时自信地与各种不同层次的人进行交流。你能够很好地处理压力,并以自信的态度应对。
你的工作内容
• 领导复杂数据管道和存储解决方案的设计、架构和实施
• 指导团队成员,提供技术指导和专业知识。
• 评估并推荐新的数据技术和工具,以提高效率。
• 与数据科学家合作,优化和扩展机器学习工作流程。
• 实施高级数据转换和聚合过程。
• 推动数据工程最佳实践和标准在团队中的应用。
• 积极参与跨职能项目规划和执行。
• 管理和优化与数据处理相关的云资源和成本。
• 领导改善数据质量、血统和元数据管理的工作。
• 与业务利益相关者合作,了解并确定战略举措的数据需求。
先前经验和要求
• 在数据工程或相关领域拥有6年以上相关经验
• 计算机科学、软件/计算机工程、数学或相关学科的学士学位,硕士或更高学历为佳
• 精通Python和SQL,具备其他通用编程语言的专家级熟练程度
• 在数据编排工具(如Prefect或Airflow)方面具有丰富经验
• 在数据转换和建模工具(如dbt)以及数据仓库技术(如Snowflake和BigQuery)或数据处理框架(如Apache Spark)方面具有丰富经验
• 在版本控制系统和CI/CD工具方面具有丰富经验
• 必须具备一种主要云平台的实际经验,首选Azure
• 领导能力,能够指导和引导初级团队成员
• 解决复杂数据工程挑战的解决问题能力。
• 与跨职能团队合作的有效沟通能力
• 管理多个数据项目的项目管理能力
奖励
我们认识到每个人在工作之外都有不同的需求。因此,除了竞争力的福利待遇(医疗、牙科、视力和带薪休假)外,我们还向员工提供许多独特的选择,如领养福利和为社区服务项目提供带薪休假。要了解更多信息,请查看我们的全面健康页面。