必备的技术/职能技能
候选人应具备以下技能的知识:
• SQL脚本编写
• Python
• 使用大数据工具的经验:Snowflake
• 云服务:AWS
• 具备面向对象功能的数据管道构建经验。
所需经验:6年以上。
角色和职责
• 数据工程师将支持跨职能分析团队,该团队由高管、数据分析师和数据科学家组成,并将确保高效的数据交付在团队的数据仓库中得到标准化。
• 理想的候选人勤奋工作,并对优化、拥有和发展团队的数据架构以支持工作室的持续数据项目和数据产品开发的前景感到兴奋。
• 构建和维护高效的数据管道架构,组装满足功能/非功能业务需求的大型复杂数据集,识别、制定和实施内部流程改进。
• 自动化手动流程,优化数据交付,重新设计基础设施以实现更高的可扩展性等。
• 构建所需的高效数据提取、转换和加载(ETL)基础设施,使用SQL和AWS的“大数据”技术,与技术和非技术利益相关者合作,协助解决与数据相关的技术问题,并支持他们的数据基础设施需求,与团队合作,努力实现干净而有意义的数据,并提高团队数据系统的功能和灵活性。