职位:高级 Databricks 数据工程师(休斯顿)
您好
我们正在招聘
高级 Databricks 数据工程师 - 全职
公司:
Sierra Digital Inc
休斯顿 TX - 现场 - 100%
全职职位
高级 Databricks 数据工程师职位概述
高级 Databricks 数据工程师负责设计、构建和优化使用 Databricks(Apache Spark)在云平台上可扩展的数据管道和分析解决方案。
🔹 核心职责
• 使用 Databricks(Spark、PySpark、SQL)设计和开发端到端数据管道
• 构建和管理 Delta Lake 架构(青铜、白银、黄金层)
• 优化 Spark 作业以提高性能、降低成本和提高可扩展性
• 从多个来源(API、RDBMS、流、文件)摄取数据
• 使用 Databricks 笔记本和工作流实施 ETL/ELT 过程
• 处理大规模结构化和非结构化数据
• 与数据科学家、分析师和业务团队合作
• 确保数据质量、治理和安全的最佳实践
• 支持 CI/CD 和版本控制(Git、Azure Dev Ops、Git Hub)
🔹 技术技能要求
• Databricks(核心专长)
• Apache Spark(PySpark、Spark SQL)
• Delta Lake
• 云平台:
• Azure(ADLS、ADF、Synapse)
• AWS(S3、Glue、Redshift)
• GCP(Big Query、GCS)
• SQL(高级)和 Python
• 数据建模和性能调优
• 流框架(Kafka、Spark 结构化流处理优先)
🔹 经验水平
• 10年以上数据工程经验
• 35年以上 Databricks/Spark 实践经验
• 云原生数据平台经验
如需更多详情,请联系我
Bennedick Sakayaraj
电子邮件 - (请使用下面的“申请此职位”框)。
网站 -
Sierra Digital, Inc | 6001 Savoy Drive, Suite 210 | Houston, Texas 77036
点击此处查看我的 LinkedIn