高级大数据工程师/架构师 - 多媒体架构...

16个月前全职
Byte Dance

Byte Dance

location 香港
unsaved
职责 通过构建最先进的数据处理和数据仓库解决方案,多媒体数据平台团队与我们的产品经理、算法和数据分析师密切合作,参与构建国际短视频业务流媒体和其他业务领域的下一代云原生数据仓库,设计和开发数据应用平台,帮助客户实现高效、实时和准确的数据驱动决策和洞察力。您将有机会与PB级数据一起工作,并与大数据计算和存储领域的许多杰出专家合作,解决最具挑战性的大数据技术和业务问题。1. 设计和开发数据平台,包括数据管道、数据仓库等,重点支持国际短视频业务流媒体/基本体验和成本优化。2. 负责数据构建、面向服务的设计、开发和性能优化,为上层分析和挖掘提供可靠、统一的离线+实时数据服务。3. 负责数据应用的设计和开发,包括数据分析工具、告警、诊断、归因分析等应用。4. 与流媒体和基本体验合作,与分析师、工程师、架构师和产品经理合作,深入了解业务,理解和合理抽象业务需求,构建数据系统,探索数据价值,并应用国际短视频业务多媒体分析和质量方法,实现业务目标。5. 深入了解国际短视频业务的其他领域,理解和合理抽象需求,与业务团队密切合作,利用数据价值实现业务目标,突破业务瓶颈。 资格 1. 本科/学士学位,技术领域,计算机科学或数学 2. 在数据仓库领域有3年以上经验,在ETL设计、实施和维护方面有3年以上经验 3. 在大数据技术方面有2年以上工作经验(Hadoop、Hive、Spark、Flink、Clickhouse等) 4. 熟练使用SQL,精通至少一种语言,如Java/Python/Scala/Golang 5. 擅长沟通,对业务敏感,工作细致,能够快速理解业务背景,并具备优秀的技术和业务整合能力。加分项:1. 丰富的数据表设计和查询优化经验 2. 在设计和使用流数据处理平台方面有经验 3. 构建或维护与大数据相关的基础设施(Hadoop、Hive、Spark、Flink、Clickhouse等),或对其实现原理有深入了解