角色:高级 Databricks 数据架构师(AWS)
地点:新泽西州 Ridgefield Park 07660
12 个月合同现场职位 - 该职位要求每周一至周五 100% 现场工作,工作时间为东部标准时间的核心营业时间。
工作描述
职位名称:高级 Databricks 数据架构师(AWS)- 实操技术负责人
工作目的:
领导 Databricks/AWS 企业数据平台的战略设计和架构路线图,同时积极参与设计、原型制作、编码和性能调优。为内部业务利益相关者和外部合作伙伴提供高级技术咨询和解决方案设计,充当复杂业务需求与技术实施之间的桥梁。通过建立设计标准、进行代码审查,并指导工程团队遵循 Databricks Serverless 和 AWS 集成的最佳实践,来管理平台的技术质量。作为角色的一部分,您需要为所有主要数据项目提供技术保证,确保解决方案稳健、具有成本效益,并符合企业安全标准。
教育背景:
计算机科学、工程或同等学历(优先考虑硕士学位)
技能和属性:
必要条件 –
卓越的“客户面对”技能:证明有能力领导研讨会、管理利益相关者期望,并向非技术受众展示复杂的技术解决方案。至少 8-10 年数据工程/架构经验,其中至少 4 年专注于 Databricks 和 AWS。对数据湖仓架构、Delta Lake 内部结构和 Spark 优化策略的专家级知识。具有数据建模(维度、金库、关系)和设计复杂 ETL/ELT 管道的经验。精通 Python 和 SQL 的高级实操编码能力,能够编写干净、可用于生产和可测试的代码。对 Databricks Serverless 架构、Unity Catalog 实施和安全模式有丰富经验。深入理解云架构(AWS Well-Architected Framework),包括网络、存储(S3)和 IAM。参与设计审查和代码审查流程的经验,能够进行建设性批评并执行标准。详细了解 DevOps 原则(使用 Terraform 的 IaC,CI/CD 管道)。了解 MS Office 套件(Word、Excel、PowerPoint、Outlook)—特别是用于创建架构图和演示文稿。具备非常强的高级关系构建和影响力技能。具有战略思维,能够平衡即时业务需求与长期架构愿景。
经验:
必要条件 -
8 年以上数据架构和工程经验。在 Databricks 平台上设计解决方案的丰富经验。
优势 -
具有在大型企业工作或作为大型机构顾问的丰富经验。持有 Databricks 数据架构师或 AWS 解决方案架构师(专业)认证。优秀的组织和规划技能,能够管理架构积压。作为顶级技术领导者,积极推动业务创新和流程改进。语言:Python、SQL、Scala。具有为数据消费设计 API 的经验。具有企业架构框架(TOGAF)的经验。