高级Databricks数据架构师(AWS)

纽约 4天前合同 网络
面议
角色:高级 Databricks 数据架构师(AWS) 地点:新泽西州 Ridgefield Park 07660 12 个月合同现场职位 - 该职位要求每周一至周五 100% 现场办公,工作时间为东部标准时间的核心业务时间。 职位描述 职位名称:高级 Databricks 数据架构师(AWS)- 实操技术负责人 工作目的: - 领导企业数据平台在 Databricks/AWS 上的战略设计和架构路线图,同时在设计、原型制作、编码和性能调优方面保持积极的实操。 - 为内部业务利益相关者和外部合作伙伴提供高级技术咨询和解决方案设计,充当复杂业务需求与技术实施之间的桥梁。 - 通过建立设计标准、进行代码审查以及指导工程团队关于 Databricks Serverless 和 AWS 集成的最佳实践来管理平台的技术质量。 - 作为角色的一部分,您需要为所有主要数据计划提供技术保证,确保解决方案稳健、具有成本效益,并符合企业安全标准。 教育背景: - 计算机科学、工程或同等学历(优先考虑硕士学位) 技能和属性: 必要条件 – - 出色的“客户面对”技能:证明能够领导研讨会、管理利益相关者期望,并向非技术观众展示复杂的技术解决方案。 - 至少 8-10 年数据工程/架构经验,其中至少 4 年专注于 Databricks 和 AWS。 - 数据湖仓架构、Delta Lake 内部结构和 Spark 优化策略的专家级知识。 - 在数据建模(维度、Vault、关系)和设计复杂 ETL/ELT 管道方面有丰富经验。 - 精通 Python 和 SQL 的高级实操编码能力,能够编写干净、可投入生产和可测试的代码。 - 拥有 Databricks Serverless 架构、Unity Catalog 实施和安全模式的丰富经验。 - 深刻理解云架构(AWS Well-Architected Framework),包括网络、存储(S3)和 IAM。 - 具备设计审查和代码审查流程经验,能够进行建设性批评并执行标准。 - 详细了解 DevOps 原则(使用 Terraform 的 IaC,CI/CD 管道)。 - 了解 MS Office 套件(Word、Excel、PowerPoint、Outlook)——特别是用于创建架构图和演示文稿。 - 在高级别具有非常强的关系构建和影响力。 - 战略思维,能够平衡即时业务需求与长期架构愿景。 经验: 必要条件 - - 8 年以上数据架构和工程经验。 - 在 Databricks 平台上设计解决方案的丰富经验。 优势 - - 拥有与大型企业合作或作为大机构顾问的丰富经验。 - 认证的 Databricks 数据架构师或 AWS 解决方案架构师(专业)。 - 出色的组织和规划技能,能够管理架构积压。 - 一流的技术领导者,积极推动业务创新和流程改进。 - 语言:Python、SQL、Scala。 - 设计数据消费 API 的经验。 - 拥有企业架构框架(TOGAF)的经验。