高级数据工程师

休斯顿 8天前全职 网络
面议
职位名称:油藏工程师承包商 - 油藏工程Python开发人员 工作地点:德克萨斯州斯普林 合同类型:合同 概述: 我们正在寻找一位经验丰富的油藏工程师承包商,与我们的油藏工程和分析团队紧密合作,将他们的分析代码投入生产,并自动化数据处理和质量检查。理想的候选人应具备Python的专业知识,并有在Spotfire和Databricks环境中工作的经验。此角色需要与工程师密切互动,将现有工作流程转化为可扩展的可维护解决方案。 主要职责: - 与不同团队合作,了解现有的分析工作流程和模型。 - 重构和生产化Python代码,主要关注可维护性。性能和可扩展性是次要考虑。 - 在Databricks中开发和部署自动化解决方案,并与Spotfire仪表板集成。 - 实施版本控制测试和文档的最佳实践。 - 确保数据安全并符合公司标准。 必备技能: - 编程:高级Python(数据处理自动化和面向对象编程)。 - 数据平台:Databricks(PySpark和SQL数据处理)Spotfire(数据可视化和集成)。 - 数据工程:ETL流程、数据管道和基于云的工作流程。 - 版本控制:Git / GitHub。 - 测试与部署:单元测试、CI / CD管道。 - 油藏工程:了解油藏工程工作流程和石油天然气行业数据。 - 沟通:能够解释和重构油藏工程师开发的代码,使其成为稳健的生产就绪解决方案。 优先技能: - 熟悉Azure云环境。 - 有分析模型性能调优和优化经验。 先前经验: - 5年Python开发的专业经验。 - 3年使用数据平台(如Databricks)和可视化工具(如Spotfire)的经验。 - 有与工程或科学团队合作将现有代码投入生产的经验。 - 在数据驱动环境中构建可扩展可维护解决方案的成功记录。 合同详情: - 地点:在德克萨斯州斯普林现场。 - 期限:1年,可能延长。 关键技能: Apache Hive, S3, Hadoop, Redshift, Spark, AWS, Apache Pig, NoSQL, 大数据, 数据仓库, Kafka, Scala 就业类型:全职 经验:年 空缺:1