高级平台工程师 - 大数据

芝加哥 2天前全职 网络
94.0万 - 140.9万 / 年
高级云工程师 - IE07NE 我们决心有所作为,并且自豪地成为一家不仅仅提供保险和政策的保险公司。在这里工作意味着有每一个机会实现你的目标——并帮助他人实现他们的目标。加入我们的团队,共同塑造未来。 The Hartford 正在寻找一位经验丰富的高级数据平台工程师加入我们的云大数据平台工程与运营团队。这个角色在培养以客户为中心的思维方式以及确保我们数据平台的稳定性、可扩展性和可靠性方面起着关键作用,以支持企业内数据与分析应用的不断发展需求。 作为技术负责人,您将运用您在 AWS 大数据/EMR 基础设施、基础设施即代码(IaC)、安全性、自动化和可观测性方面的深厚专业知识来设计、优化和维护强大、可扩展的解决方案。您将与数据工程师密切合作,分析需求和挑战,推荐以平台为驱动的解决方案,以最大化性能和效率。 我们正在寻找一位充满激情的技术专家,他能够在动态、快节奏的环境中茁壮成长,并致力于构建具有弹性、面向未来的数据平台。您将指导和引导其他平台和可靠性工程师,促进技术卓越、创新和协作的文化。 职责 管理和设计云中多个 Hadoop 集群的大数据平台(AWS EMR),包括无服务器和容器化环境,以确保可扩展性、性能和可靠性。 通过基础设施即代码(IAC)设计、实施和维护高度可扩展和弹性的多租户数据平台,以符合 The Hartford 的工程、安全和治理原则。 确保卓越的运营,独立推动所有高影响事件的分类和服务恢复,以最大限度地减少服务恢复的平均时间和对业务的影响。展示端到端的所有权。 应用站点可靠性工程(SRE)原则设计和实施强大的工具、主动警报和自动响应机制,识别、缓解和解决可靠性风险——专注于预防、早期检测和通过自动化进行持续改进。 拥有并发展平台、PaaS 和 SaaS 解决方案的架构,以满足当前和未来的业务需求,推动创新、可扩展性和卓越运营。 参与值班轮换,在服务影响事件期间提供动手技术专长,以确保快速诊断、有效解决和系统可靠性的持续改进。 评估、实施和管理新兴数据技术,重点关注大数据、分析、数据整理、商业智能和数据可视化,以推动创新和效率。 作为数据平台、工具和应用接口的主题专家和技术负责人——推动根本原因分析,解决复杂的技术问题,确保平台的可靠性和性能。 为初级和中级数据工程师提供技术领导和指导,促进技能发展并推动工程最佳实践。 通过启用数据整理、探索和分析的自助服务能力,与数据工程师、数据科学家和业务分析师合作并赋能他们。 开发培训材料并提供最终用户培训课程,以推动采用,确保数据解决方案的有效使用,并增强客户参与度。 支持数据资产的文档、元数据管理和可视化,以促进数据的可发现性、透明性和自助分析。 通过建立对共享优先事项和战略目标的强烈团队承诺,培养责任和协作的文化。 资格 计算机科学、计算机工程或密切相关领域的学士学位(或外国同等学历)。相关经验可以通过合格的学士后学术项目获得。 在平台管理、大数据技术、数据工程、分析和运营方面拥有丰富的专业知识。 熟练掌握包括 Hadoop、Linux、Python、SQL、Spark、Kerberos、云平台、安全协议、性能调优、机器学习算法、生产工程、作业调度和运营支持在内的广泛工具和概念。 至少有 7 年在 IT、平台管理、数据库管理、分析或同等教育和工作经验的组合中逐步和多样化的经验。 至少有 3 年在 AWS 上使用基础设施即代码(CloudFormation、Terraform、Ansible)和 CICD 管道(Jenkins、Nexus、AWS CodeBuild、CodeDeploy 或 CodePipeline)开发平台解决方案的实际工程经验。 至少有 3 年为开发人员或平台管理员提供架构指导和技术方向的经验。 具备数据工程方面的知识,涉及使用数据库平台设计和构建数据应用。 职责应包括数据摄取、数据准备、ETL 过程、数据聚合、数据挖掘以及数据库和分析应用的开发。 在通过变更管理和事件管理流程管理变更方面有经验。 在实施可靠性工程实践和利用 Splunk、Dynatrace、CloudWatch 等可观测性仪表板方面有经验者优先。 能够快速学习新技术,并在 6-12 个月内熟练执行主要工作职责。 较强的分析能力、问题分析技术以及广泛的替代技术知识。 较强的沟通能力,能够与业务和 IT 资源有效合作。 优先技能 在主要 AWS 服务(EMR、EKS、EC2、IAM、RDS、Route53 和 S3 等)方面具有高级经验。 使用 CloudFormation / Terraform 进行配置管理的经验。 具有编程和/或脚本语言(Python、bash)的高级经验。 优先拥有“AWS 解决方案架构师认证”。 优先拥有“Cloudera 管理员认证”。 该职位将采用混合工作时间表,预计每周在办公室(俄亥俄州哥伦布市、伊利诺伊州芝加哥市、康涅狄格州哈特福德市或北卡罗来纳州夏洛特市)工作 3 天(周二至周四)。 候选人必须获得在美国工作的授权,无需公司赞助。公司将不支持此职位的 STEM OPT I-983 培训计划背书。 薪酬 列出的年化基本工资范围主要基于对外部市场类似职位的分析。实际基本工资可能会有所不同,并可能高于或低于列出的范围,具体取决于包括但不限于绩效、熟练程度和履行角色所需能力的展示。基本工资只是 The Hartford 员工总薪酬包的一个组成部分。其他奖励可能包括短期或年度奖金、长期激励以及即时认可。该职位的年化基本工资范围为: $136,000 - $204,000 平等机会雇主/性别/种族/肤色/退伍军人/残疾/性取向/性别认同或表达/宗教/年龄