华特迪士尼公司内容与参与部门的高级数据工程师

15个月前全职
100K - 150K USD The Walt Disney Company

The Walt Disney Company

location 纽约
unsaved
职位 摘要: 我们迪士尼流媒体服务(DSS)下的数据与分析团队,属于迪士尼媒体与娱乐分销(DMED)部门,正在寻找一位高级数据工程师。数据对于我们所有的决策需求至关重要,无论是与产品设计相关、衡量广告效果、帮助用户发现新内容还是在新兴市场建立新业务。这些数据具有极高的价值,为我们提供了关于如何持续改进我们的服务,满足用户、广告商和内容合作伙伴的需求的见解。我们的内容和参与数据工程团队正在寻找一位极富工作热情、具备坚实技术背景并热衷于深入研究大数据以开发最先进数据解决方案的数据工程师。职位职责为:为内容表现和内容参与数据的数据产品和数据仓库的设计和发展做出贡献。设计和开发可扩展的数据仓库解决方案,在大数据环境(云端、本地、混合)中构建ETL流程。我们的技术栈包括Hadoop、AWS、Snowflake、Spark和Airflow。帮助架构数据解决方案/框架,并为底层数据仓库和数据集定义数据模型。与数据产品经理、数据架构师和数据工程师合作,设计、实施和交付成功的数据解决方案。维护您的工作和更改的详细文档,以支持数据质量和数据治理。确保高操作效率和解决方案的质量,以满足服务级别协议并支持对客户(数据科学、数据分析团队)的承诺。成为敏捷/Scrum实践的积极参与者和倡导者,以确保团队的健康和流程改进。基本资格:5年的数据工程经验,开发大型数据流水线。熟练掌握SQL技能,并能创建查询以提取数据和构建高性能数据集。具有使用Spark、Hadoop(HDFS、Hive、Presto、PySpark)等分布式系统进行查询和处理数据的实际经验。具有至少一种主要的MPP或云数据库技术(Snowflake、Redshift、Big Query)的经验。熟悉AWS(S3、EMR、EC2)等云技术的经验。具有数据集成工具集(如Airflow)的经验,并编写和维护数据流水线。熟悉数据建模技术和数据仓库的标准方法和实践。良好的脚本编写能力,包括Bash脚本和Python。熟悉Scrum和敏捷方法。您是一个善于解决问题、注重细节并具有出色的分析和沟通能力的人。计算机科学、信息系统或相关领域的学士或硕士学位。薪资范围:10万美元至15万美元。最低资格:数据科学与机器学习。预计薪资:根据资格,每小时20至28美元。