高级大数据工程师

16个月前全职
20 - 28 USD Nielsen

Nielsen

location 旧金山
unsaved
高级大数据工程师 - 78146 Gracenote - 美国加利福尼亚州埃默里维尔 探索和发现尼尔森全球媒体!作为一家在110个国家设有办事处的全球独立测量和大数据分析公司,我们专注于您的未来。 Gracenote,尼尔森公司是领先的娱乐元数据和媒体识别技术提供商,为顶级电视、音乐、体育和汽车平台提供发现功能。 我们目前正在寻找我们的大数据团队的高级数据工程师,帮助从世界各地摄取、处理和整合视频元数据。 技术栈: Scala,Apache Spark,Hadoop,Pig或Hive,Apache Ignite,AWS,MapReduce,Java,AWS 该团队由在湾区领先的网络消费者和开源公司构建个人资料、分析和大数据平台方面有经验的工程师组成。 您将要做的事情: • 使用Spark、Spark Streaming、Kafka、Cassandra和Apache Ignite等各种工具开发处理平台,处理数千兆字节的视频元数据 • 找到使用内存RDD数据库(如Apache Ignite)加速处理流程的方法 • 想出可能将全球视频、体育和音乐数据存储在娱乐图中的思路 • 在AWS上运营和扩展我们的基础设施 所需技能: • 5年以上Java或Scala开发经验 • 3年以上MapReduce、Apache Hadoop、Apache Kafka和Apache Spark开发经验 • 2年以上AWS、Azure或GCP工作经验 • 理解数据流、数据架构、ETL以及结构化和非结构化数据的处理 • 渴望不断提升自己作为软件工程师和架构师的能力 • 能够作为团队的一员并有自我激励能力 • 计算机科学、数学或等同工作经验的学士学位,研究生学位优先考虑 #LI-DG1 关于尼尔森全球媒体 作为真理的仲裁者,尼尔森全球媒体为媒体行业提供关于人们观看和听取什么的公正、可靠的数据。为了发现真相,我们测量各种渠道和平台,从播客到流媒体电视到社交媒体。当公司和广告商拥有真相时,他们对受众有了更深入的了解,可以加速增长。 您想与尼尔森一起推动行业发展吗?我们的员工是推动力。您的思想、想法和专业知识可以推动我们前进。无论您对如何最大限度地利用新技术有何新思路,还是发现市场上的空白,我们都愿意倾听并采取行动。我们的团队因思想、经验、技能和背景的多样性而变得强大。您将享受与聪明、有趣、好奇的同事一起工作的乐趣,他们对自己的工作充满激情。加入一个激励您发挥最佳水平的团队吧! 尼尔森致力于招聘和留住多样化的员工队伍。我们自豪地成为一个平等机会/肯定行动雇主,不考虑种族、肤色、宗教、性别、性别认同或表达、性取向、国籍、遗传信息、残疾状况、年龄、婚姻状况、受保护的退伍军人身份或任何其他受保护的类别做决策。 工作类型: 常规 主要地点: 加利福尼亚州埃默里维尔 次要地点: , , , 出差: 无 预计薪资:根据资历每小时20至28美元不等