大数据工程师

16个月前全职
120K - 165K USD LiveRamp

LiveRamp

location 旧金山
unsaved
LiveRamp是全球最具创新力公司选择的数据协作平台。作为消费者隐私、数据伦理和基础身份的开创性领导者,LiveRamp正在为构建连接的客户视图树立新标准,具有无与伦比的清晰度和背景,同时保护宝贵的品牌和消费者信任。 LiveRamp提供完全灵活的协作方式,可以支持最广泛的数据协作用例-在组织内部、品牌之间以及跨其优质合作伙伴的全球网络之间。 从标志性的消费品牌和科技巨头到银行、零售商和医疗保健领域的领军企业,数百家全球创新者都依靠LiveRamp通过加深客户参与和忠诚度、激活新合作伙伴关系以及最大限度地利用他们的一方数据的价值来构建持久的品牌和业务价值,同时保持在迅速发展的合规和隐私要求的前沿。 关于这个职位: 我们在身份工程团队负责维护连接消费者和他们在线使用的设备的数万亿个不同标识符的图处理引擎。 帮助我们尽快、高效地处理这个万亿级边缘图。 你将: - 与一支充满支持和激情的软件工程师、产品、基础设施和其他内部合作伙伴的团队合作,解决具有挑战性的问题,执行开发项目,构建、增强和定制我们的高性能数据摄取、分区、图形和边缘构建系统。 - 培养一个积极的环境,以完整性、运营卓越为特点,通过使用Java开发和利用Docker、Kubernetes、Terraform、Java、Gradle、Jenkins、GCP、Hadoop和Spark、SQL等工具/框架来实现高水平的技术生产力、可靠性和简洁性,并倾向于快速交付和迭代。 你的团队将: - 认为反馈对帮助我们个人和团队成长很重要;我们始终寻找机会友善地分享积极和建设性的反馈,并希望以优雅的方式接受反馈。 - 遵循基于Scrum的DevOps模型,有几个指导原则: - 支持、信任和激励参与的人员 - 持续软件交付和流程改进 - 最小化开发障碍并利用自动化 - 工作内容: - 边缘摄取和分区框架:我们无法一次处理所有万亿个边缘,幸运的是我们不必这样做。 相反,我们处理包含特定类型边缘的子图。我们的边缘摄取和分区利用LiveRamp的Seek MSJ框架,有效地将新数据合并到现有的边缘存储中。 作为服务的路径计算:我们为其他LiveRamp工程团队提供一项服务,用于在我们庞大的图中查找特定类型的路径。 它每天提供8万次请求、10PB的数据,这得益于它使用高度可扩展的Spark作业/单存储库DB过程和智能缓存机制。 关于你: - 有2年以上编写和部署面向对象生产代码的经验。 - 有2年以上在Java、Spark/Hadoop和/或SQL中编写和优化大规模批处理流水线的经验。 - 有2年以上使用基于云的平台(如GCP、AWS、Azure或类似技术)的经验。 - 热衷于构建大规模分布式系统,并能编写易于维护和高性能的代码。 - 乐于学习和适应最新的工具和技术。 - 热衷于帮助团队构建和部署符合最佳实践的软件。 - 创业型个性,喜欢作为团队的一部分工作:聪明、诚信、友好、勤奋和高效。 - 计算机科学、信息系统或相关学位的学士或硕士学位。 加分项: - 有使用GCP产品(如BigTable、BigQuery、Dataproc、PubSub)或其他数据工具(如Kafka、Hive或Apache Beam)的经验。 - 有使用Terraform、Kubernetes、Helm或Gradle等开发工具的经验。 - 有设计和实施大规模系统和/或RESTful API的接口和基础设施的经验。 福利: - 人员:与才华横溢、合作友好、热爱工作的人们一起工作。 - 办公室食品:享用提供的餐点、无限的零食和偶尔的食品车。 - 乐趣:我们举办线下和线上活动,如游戏之夜、欢乐时光等。 - 工作/生活和谐:灵活的带薪休假、在家工作的选择和带薪产假。 - 全面健康计划:医疗、牙科、视力、人寿、残疾、长期护理、事故和重大疾病保险,税前账户(健康、扶养和通勤),以及通过Carrot提供的家庭形成福利。 此外,还有Milk Stork、备份儿童和老人护理以及宠物保险折扣、心理健康支持(通过Talkspace)等福利。 - FlexPerks报销计划:为适应您的健康、情感、财务、家庭、旅行和娱乐、便利和安全开支提供灵活性和选择(每季度375美元)。 (美国LiveRamp员工) - 储蓄:我们的401K匹配计划-工资的1:1匹配,最高可达6%,帮助您提前规划。此外,员工股票购买计划-享受LiveRamp股票购买价格的15%折扣(美国LiveRamp员工) - RampRemote:一个全面的计划,帮助您建立适合自己的家庭办公室 - 地点:在我们旧金山办公室的中心工作! 对于所有纽约和旧金山的职位 年度基本薪酬范围约为12万美元至16.5万美元。实际的报价将根据多个因素确定,包括申请人的经验、知识、技能和能力、地理位置以及我们团队之间的内部公平性。 关于我们的更多信息: LiveRamp的使命是以有意义的方式连接数据,而这始于我们的人。我们知道,启发人们的团队由各种背景和经验的人组成。 我们也知道,个人在工作时不仅能够全身心投入,而且感觉自己真正属于其中时,才能发挥出最佳水平。 将LiveRampers与新思想和彼此联系起来是我们的指导原则之一,它指导我们如何在八个国家和四个大陆的全球团队中招聘、培训和发展。 LiveRamp是一家积极采取行动和提供平等机会的雇主(AA / EOE / W / M / Vet / Disabled),在招聘、聘用、培训、晋升或其他员工任用或合同授予方面不因一个人的种族、肤色、性别、年龄、宗教、国籍、受保护的退伍军人身份、残疾、性取向、性别认同、遗传信息或其他受保护状态而歧视。 根据旧金山公平机会法令,有犯罪记录的合格申请人将根据相关法令考虑职位。 加利福尼亚州居民:有关我们在工作申请过程中如何收集、使用和披露您提供的个人信息的更多信息,请参阅我们的加利福尼亚州人事隐私政策。 对所有招聘机构:LiveRamp不接受机构简历。请不要将简历转发到我们的职位别名、LiveRamp员工或任何其他公司位置。 LiveRamp对未经请求的简历不负责任。 LI-Remote 关于我们的更多信息: LiveRamp的使命是以有意义的方式连接数据,而这始于我们的人。我们知道,启发人们的团队由各种背景和经验的人组成。 我们也知道,个人在工作时不仅能够全身心投入,而且感觉自己真正属于其中时,才能发挥出最佳水平。 将LiveRampers与新思想和彼此联系起来是我们的指导原则之一,它指导我们如何在九个国家和四个大陆的全球团队中招聘、培训和发展。 点击此处了解更多关于LiveRamp的多样性、包容性和归属感(DIB)的信息。 最后更新:2023年12月20日