数据工程师 - AI实践团队

休斯顿 3天前全职 网络
65.9万 - 104万 / 年
ABS正在寻找一名出色的数据工程师,加入我们的人工智能(AI)实践团队,成为全职员工。在这个角色中,您将设计和运营支持AI聊天助手、定制AI模型和AI驱动的流程优化的数据基础,为ABS咨询客户提供服务。您将构建强大的管道,集成结构化和非结构化数据,标准化和标记企业内容,并为AI工作负载提供可扩展的、低延迟的检索能力。 工作地点: 该职位可以设在德克萨斯州休斯顿、田纳西州诺克斯维尔或华盛顿特区。 您的工作内容: - 设计、构建和维护可扩展的ETL/ELT管道,以摄取、清理和转换用于AI助手和定制模型的结构化和非结构化数据。 - 将多样化的知识库(文档、政策、程序、标准、数据库)整合到支持检索增强生成(RAG)和搜索的集中数据平台中。 - 实施数据标准化、规范化和标记管道,以使内容与企业分类法和本体对齐。 - 与AI/ML工程师合作,将模型准备好的数据集、特征存储和嵌入用于预测、分类和优化用例。 - 优化数据工作流的可靠性、成本和性能,包括批处理和流处理工作负载的监控、警报和容量规划。 - 建立和执行数据质量、血统和治理实践,以确保AI系统和流程自动化解决方案的可信输入。 - 自动化和模板化常见的数据工程模式,以加速多个客户参与和行业领域的交付。 - 与顾问和业务利益相关者合作,将流程优化和分析需求转化为稳健、可维护的数据解决方案。 您需要具备的条件: 教育和经验 - 计算机科学、数据工程、信息系统或密切相关技术领域的学士学位;优先考虑硕士学位。 - 6年以上专业数据工程经验,设计、构建和运营生产数据解决方案。 - 在数据密集型环境(如分析平台、AI/ML工作负载、大规模内容库或企业数据平台)中工作的经验。 - 至少在一个主要云提供商(AWS、Azure或Google Cloud)上交付解决方案的实际经验,包括托管数据和分析服务。 知识、技能和能力 - 精通SQL和至少一种常用于数据工程的编程语言(优先考虑Python),用于构建生产级数据管道。 - 具备现代数据处理框架和平台(如Spark、Databricks、Snowflake、BigQuery、Synapse或类似平台)的实际经验。 - 熟练掌握ETL/ELT编排工具和工作流(如Airflow、dbt、Azure Data Factory、AWS Glue或同等工具)。 - 设计和运营数据湖/湖仓,并将多个数据源(关系型、NoSQL、文件、API)整合为统一数据模型的经验。 - 深入处理非结构化和半结构化数据(文档、PDF、JSON、日志),包括内容提取、规范化和元数据/标记的经验。 - 熟悉AI/ML数据模式,包括特征工程、嵌入、向量数据库和检索增强生成(RAG)管道。 - 对于受监管或合规敏感环境的数据建模、数据质量、数据治理和血统实践有深入理解。 - 熟练掌握云原生数据服务(如S3/ADLS/GCS、托管仓库、流服务如Kafka/Kinesis/Event Hubs)。 - 扎实的软件工程最佳实践基础(版本控制、CI/CD、测试、代码审查),应用于数据工程。 汇报关系: 该角色向项目经理汇报,初期不包括直接下属。 薪资范围: 95,000 - 150,000美元 起薪基于多种因素,包括技能和经验。 关于我们 160多年前,我们开始致力于促进海上生命和财产的安全,并保护自然环境。今天,我们仍然忠于我们的使命,继续支持面临快速变化的法规和新技术的组织。在这一切中,我们以愿景和使命为锚,帮助我们的客户在不确定的时代找到清晰。 ABS是海洋和海上分类以及其他创新安全、质量和环境服务的全球领导者。我们在支持海上全球能源转型、远程和自主海洋系统的应用、尖端技术解决方案以及许多其他令人兴奋的进步方面处于前沿。我们对安全、可靠性和效率的承诺始终如一,指导我们的客户实现更安全和更高效的运营。 关于我们的福利 ABS集团自豪地提供多种行业领先的福利,旨在提升员工及其家人的生活和福祉。这些福利包括但不限于医疗保险(PPO和HD)、牙科和视力保险、健康储蓄账户(HSA)、灵活储蓄账户(FSA)、人寿保险、意外死亡和伤残保险、残疾休假计划、育儿假计划、带薪假期和带薪休假时间。公司提供员工援助计划(EAP),在个人健康方面提供额外支持,包括工作生活服务。ABS集团还提供符合计划要求的公司匹配的401K计划。 平等机会 ABS公司集团致力于为员工提供平等就业机会,并禁止基于种族、肤色、信仰、宗教、国籍、性别、性别认同、年龄、残疾、婚姻状况、性取向、公民身份或退伍军人身份或其他可能受联邦政府或特定州就业法律保护的非工作相关特征的歧视。 通知 ABS及其附属公司(ABS)不会向任何第三方机构支付费用,除非有有效的ABS主服务协议(MSA),并由人力资源部门授权和签署。任何提供给ABS任何员工的简历、履历、申请或其他形式的候选人提交,如无有效的MSA在档,将被视为ABS的财产,不会支付任何费用。 其他 本职位描述无意且不应被解释为与现任者的工作相关的责任、技能、努力或工作条件的全包列表。它旨在准确反映工作薪酬结构决策所需的主要工作要素。#ogjs