大数据平台首席工程师

纽约 4天前全职 网络
面议
加入哈特福德担任大数据平台工程师主管,与我们一起超越保险范围和政策,致力于产生积极影响。与我们合作意味着您有机会实现自己的目标,同时帮助他人实现他们的目标。成为我们团队的一员,帮助塑造未来! 作为我们云大数据平台工程与运营团队的重要成员,您将在推动以客户为中心的思维方式方面发挥关键作用,同时确保我们的数据平台稳定、可扩展且可靠,以满足企业数据与分析应用不断变化的需求。 在这个技术主管职位上,您将利用您在AWS大数据/EMR基础设施、基础设施即代码(IaC)、自动化、安全性和可观察性方面的丰富专业知识来设计、优化和维护强大、可扩展的解决方案。您将与数据工程师密切合作,分析需求和挑战,推荐平台驱动的解决方案,以最大化性能和效率。 我们寻找一位在快节奏环境中茁壮成长并致力于构建具有弹性、面向未来的数据平台的热情技术专家。您还将指导和引导初级工程师,促进协作、技术卓越和创新的文化。 主要职责: • 管理和工程多个AWS EMR Hadoop集群上的大数据平台,包括无服务器和容器化环境,确保最佳的可扩展性、性能和可靠性。 • 使用基础设施即代码(IaC)设计、实施和维护高度可扩展、具有弹性的多租户数据平台,遵循哈特福德的工程、安全和治理原则。 • 通过管理高影响事件来推动卓越运营,以最小化服务停机时间及其对业务运营的影响,展示完全的所有权。 • 通过设计和部署有效的工具、主动警报和自动响应来实施站点可靠性工程(SRE)实践,以识别和解决可靠性风险。 • 塑造平台、PaaS和SaaS解决方案的架构,以满足当前和未来的业务需求,推动创新和卓越运营。 • 参与值班轮换,在服务影响事件期间提供实践专业知识,以确保快速诊断和解决。 • 评估、实施和管理专注于大数据、分析和数据可视化的新数据技术,以提高效率和创新。 • 作为数据平台、工具和应用程序的主题专家和技术权威,领导技术问题解决并确保平台可靠性。 • 为初级和中级数据工程师提供技术领导和指导,促进技能发展并推动工程最佳实践。 • 通过提供数据探索和分析的自助服务能力来支持数据工程师、数据科学家和分析师。 • 开发培训材料并提供培训课程,以增强数据解决方案的采用和使用并改善客户参与。 • 支持元数据和数据资产的文档和管理,以增强可发现性并促进自助分析。 • 鼓励责任和协作文化,确保团队对共同优先事项和战略目标的强烈承诺。 资格: • 计算机科学、计算机工程或相关领域的学士学位(或外国同等学历)。通过合格的学术项目获得的相关经验也可考虑。 • 在大数据技术、数据工程、分析和运营方面的广泛平台管理专业知识。 • 熟练使用包括Hadoop、Linux、Python、SQL、Spark、Kerberos和生产工程在内的工具和技术。 • 至少7年的IT、平台管理或数据库管理的渐进经验。 • 至少3年的实际工程经验,使用基础设施即代码(CloudFormation、Terraform、Ansible)和CI/CD管道在AWS上开发平台解决方案。 • 至少3年为开发人员或平台管理员提供架构指导的经验。 • 具备数据工程知识,拥有设计和构建利用数据库平台的数据应用程序的经验。 • 在数据管理流程方面拥有丰富经验,包括数据摄取、准备、ETL、聚合和分析应用程序开发。 • 熟悉变更和事件管理流程。 • 具备可靠性工程实践和可观察性工具的经验者优先。 • 能够快速学习新技术并在6-12个月内熟练履行工作职责。 • 具备强大的分析技能、问题分析技术和广泛的技术替代方案意识。 • 优秀的沟通技巧,能够有效地与业务和IT利益相关者合作。 优先技能: • 具备关键AWS服务(EMR、EKS、EC2、IAM、RDS、Route53、S3等)的高级经验。 • 具备使用CloudFormation或Terraform进行配置管理的经验。 • 具备Python或Bash等编程/脚本语言的高级技能。 • 优先拥有AWS解决方案架构师认证。 • 优先拥有Cloudera管理员认证。 该职位支持混合工作时间表,期望每周在哥伦布(OH)、芝加哥(IL)、哈特福德(CT)或夏洛特(NC)的办公室工作3天(周二至周四)。 候选人必须被授权在美国工作,无需公司赞助。该职位不支持STEM OPT I-983培训计划背书。 薪酬: 列出的年度基本工资范围基于对类似职位的市场分析。实际工资可能会根据绩效和个人能力而有所不同。基本工资是哈特福德总薪酬包的一部分,可能还包括奖金、激励和认可计划。该职位的年度基本工资范围为: $136,000 - $204,000 哈特福德是一个平等机会雇主/性别/种族/肤色/退伍军人/残疾/性取向/性别认同或表达/宗教/年龄。 加入我们,在过去200多年中为我们的客户、社区和员工做正确的事情。成为我们创新和服务周围人的旅程的一部分。