数据工程师,数字数据产品
业务部门:员工
子业务:技术
发布类别:技术/工程
关于我们:
职业水平:中级
国家:美国
州/省:纽约
城市:纽约市
职责:
作为数字数据与分析团队的首席数据工程师,您将负责设计、构建和管理数据管道。我们的团队接收、分析和存储多个内部和外部数据集,并构建应用程序来展示这些数据,以支持我们的业务合作伙伴的战略决策。我们是一个使用AWS和开源技术的团队,包括Python、Pandas、Spark、Hive、Postgres、Redis、MongoDB、Flask,以及Tableau和MicroStrategy等BI工具。我们在一个非常敏捷的环境中工作,产品规格是灵活的,并且经常随着时间的推移而迅速变化。我们正在寻找那些对模糊不清的问题感到舒适,并能够找到技术解决方案的人。
- 与业务合作伙伴密切合作,为整体数据产品路线图做出贡献,了解他们面临的挑战,并开发分析工具来帮助推动业务决策
- 领导并个人贡献设计、开发和维护利用AWS、Tableau、Python技术、Spark等技术的解决方案
- 2年以上AWS技术经验。强大的Python和Pandas在AWS Lambda框架中的使用经验是非常理想的。有使用EMR和/或Databricks的经验
- 必须了解关系数据建模的基础知识。希望有MemSQL的经验,但任何以下相关经验也可以接受:Snowflake、MySQL、Redshift、Athena、MSSQL Server、Oracle
- 对数字媒体业务和广告投放技术有相当的了解,有处理交易数据的经验
- 向业务合作伙伴介绍架构、能力、最佳实践和解决方案,以构建未来的增强功能
- 协助分析业务需求、源系统、了解底层数据源、转换需求、数据映射、数据模型和报告解决方案的元数据
- 编写易于理解的文档和架构图,并随着代码和框架的变化及时更新
- 借助在大数据、BI和数据库技术方面的扎实技术专长,进行项目代码审查/检查点,以确保交付内容的质量
资格/要求:
- 工程、计算机科学、信息系统或相关领域的学士学位,具有4年以上相关经验。
- 强大的计算机科学/工程/信息系统背景
- 在数字媒体发布商、广告行业有1年以上的经验,对数字研究有扎实的理解
- 2年以上数据建模、数据架构、数据质量、元数据、ETL和数据仓库方法和技术的经验。
- 在以下任意组合中的任何一项具有经验:SQL、AWS、大数据、Linux、MicroStrategy、Tableau、Python、React.js、API、Spark、Scala
- 强大的解决问题的能力。
- 具有良好的口头和书面沟通和影响力技巧,能够传达新概念并推动流程和行为的变革,能够向管理层和非技术人员传达复杂的技术主题
期望的特点:
- 有使用Omniture、Adobe Analytics、Rentrak/comScore、Operative One、Google DoubleClick、Freewheel、Nielsen等各种数字平台的经验
- 能够设计简明扼要且视觉吸引人的报告、用户界面、模型和文档
- 能够阅读外部API文档,并编写管道从合作伙伴的系统中提取数据
- 能够编写和建立内部API端点,与其他内部团队共享数据
- 强调分析能力,结果导向和执行力。
- 能够在跨职能团队环境中与来自多个业务单位、供应商、国家和文化的人合作。
- 自我驱动/自发和足智多谋,能够独立和团队合作实现目标,并促进信息的开放流动,使所有利益相关者都得到充分的了解。
- 能够适应不断变化的要求、时间表和优先事项。
- 能够在最少的监督下独立工作,并积极解决问题
- 充满活力、承诺和以解决问题为中心,能够在压力下工作并实现目标