高级Databricks数据工程师;休斯顿

休斯顿 29天前全职 网络
面议
职位:高级 Databricks 数据工程师(休斯顿) 您好 我们正在招聘 高级 Databricks 数据工程师 - 全职 公司: Sierra Digital Inc 休斯顿 TX - 现场 - 100% 全职职位 高级 Databricks 数据工程师职位概述 高级 Databricks 数据工程师负责设计、构建和优化使用 Databricks(Apache Spark)在云平台上可扩展的数据管道和分析解决方案。 🔹 核心职责 • 使用 Databricks(Spark、PySpark、SQL)设计和开发端到端数据管道 • 构建和管理 Delta Lake 架构(青铜、白银、黄金层) • 优化 Spark 作业以提高性能、降低成本和提高可扩展性 • 从多个来源(API、RDBMS、流、文件)摄取数据 • 使用 Databricks 笔记本和工作流实施 ETL/ELT 过程 • 处理大规模结构化和非结构化数据 • 与数据科学家、分析师和业务团队合作 • 确保数据质量、治理和安全的最佳实践 • 支持 CI/CD 和版本控制(Git、Azure Dev Ops、Git Hub) 🔹 技术技能要求 • Databricks(核心专长) • Apache Spark(PySpark、Spark SQL) • Delta Lake • 云平台: • Azure(ADLS、ADF、Synapse) • AWS(S3、Glue、Redshift) • GCP(Big Query、GCS) • SQL(高级)和 Python • 数据建模和性能调优 • 流框架(Kafka、Spark 结构化流处理优先) 🔹 经验水平 • 10年以上数据工程经验 • 35年以上 Databricks/Spark 实践经验 • 云原生数据平台经验 如需更多详情,请联系我 Bennedick Sakayaraj 电子邮件 - (请使用下面的“申请此职位”框)。 网站 - Sierra Digital, Inc | 6001 Savoy Drive, Suite 210 | Houston, Texas 77036 点击此处查看我的 LinkedIn