职位：高级数据工程师（格伦代尔）
城市：加利福尼亚州格伦代尔
现场/混合/远程：混合（每周3天现场，周五远程）
时长：12个月
费率范围：
根据经验，W2最高可达每小时85美元（不接受C2C或1099或分包）
工作授权：绿卡，美国公民，所有有效的EAD（除OPT、CPT、H1B）
必须具备：
5年以上数据工程经验
Airflow
Spark Data Frame API
Databricks
SQL
API集成
AWS
Python或Java或Scala
职责：
维护、更新和扩展核心数据平台管道。
构建数据发现、血缘、治理和隐私工具。
与工程和跨职能团队合作，提供可扩展的解决方案。
使用Airflow、Spark、Databricks、Delta Lake、Kubernetes和AWS构建和优化工作流。
支持平台标准、最佳实践和文档。
确保数据质量、可靠性和SLA在数据集中的遵循。
参与敏捷仪式和持续的流程改进。
与内部客户合作，了解需求并优先考虑增强功能。
维护支持治理和质量的详细文档。
资格：
5年以上大规模管道数据工程经验。
精通SQL和一种主要编程语言（Python、Java或Scala）。
具有Spark和Databricks的生产经验。
具有API数据源的摄取和交互经验。
具备Airflow编排的实际操作经验。
具有使用GraphQL开发API的经验。
强大的AWS知识和基础设施即代码的熟悉度。
理解OLTP与OLAP、数据建模和数据仓库。
强大的问题解决和算法技能。
清晰的书面和口头沟通能力。
敏捷/敏捷开发经验。
拥有STEM领域的学士学位或同等行业经验。
