领先的软件工程师 - 数据(人工智能与自然语言处理)

14个月前全职
SPLORE PTE. LTD.

SPLORE PTE. LTD.

location 新加坡
unsaved
由淡马锡创立和资助的Splore是一家专注于重新构想元宇宙一代搜索和发现的早期创业公司。元宇宙一代指的是以在线为主的用户,他们重视沉浸式数字体验,以新颖的方式利用人工智能和其他技术,并在在线社区中进行互动。 我们的使命是使用户能够在这个新世界中创建和消费内容,如游戏玩家,以便他们能够在传统搜索的限制之外找到和发现内容。 我们正在寻找一位才华横溢、经验丰富的首席/高级软件工程师加入我们的搜索引擎人工智能团队。您将负责设计、开发和实施基于人工智能和机器学习的数据驱动解决方案,以解决复杂问题。您将与跨职能团队密切合作,包括产品经理、人工智能团队和用户体验设计师,为游戏玩家打造最佳的搜索引擎体验。 在这个角色中,您需要: • 利用您对数据技术的深入理解,包括数据库、数据仓库、数据管道和数据处理框架,设计和开发强大而可扩展的数据解决方案 • 使用各种数据技术,如SQL和NoSQL数据库,高效地存储和检索大量的结构化和非结构化数据 • 利用Hadoop、Spark和Kafka等数据处理框架对数据进行规模化的分析和处理,确保高性能和可靠性 • 设计和实施数据管道,以在系统和数据基础设施的组件之间高效可靠地移动和转换数据 • 应用您在数据建模方面的专业知识,为存储和检索设计高效和优化的数据结构 • 通过索引、分区和其他性能调优技术优化数据处理和查询性能 • 实施数据质量检查,并确保遵守数据完整性和合规性的数据治理实践 • 实施适当的数据安全措施和访问控制,以保护敏感数据 • 与数据科学家、数据分析师和其他工程师等跨职能团队合作,了解需求并提供高质量的数据解决方案 • 通过有效的调试和故障排除技术,识别和解决与数据相关的问题、性能瓶颈和其他技术问题 • 持续关注新兴的数据技术和行业趋势。不断提升您的技能和知识,推动数据工程的创新和效率 如果您具备以下条件,您应该申请: • 计算机科学、信息技术或相关领域的学士或硕士学位 • 在构建平台和应用方面有10年以上的经验 • 作为软件工程师拥有8至10年相关经验,专注于数据技术 • 对数据库、数据仓库、数据管道和数据处理框架有深入的了解 • 有使用一系列数据技术的经验和/或熟悉,如SQL、NoSQL、Hadoop、Spark、Kafka、AirByte、Airflow、DataHub、Great Expectations、DBT和Elasticsearch • 熟练掌握在数据工程中常用的编程语言,如Python、Java或Scala • 在设计和开发数据管道、数据处理和数据集成解决方案方面有经验 • 对数据建模和数据库设计原则有深入了解 • 有建立端到端数据基础设施的经验,例如数据湖,重点关注数据质量监控和数据血缘追踪 • 熟悉数据仓库的概念和技术 • 强大的问题解决和分析能力 以下是额外的优势: • 理想的候选人应该好奇、咨询能力强、组织有序、口才流利,并对在快节奏的环境中工作感到兴奋 • 拥有主人翁心态:可靠,对自己工作的质量感到自豪。 • 渴望:有探索和提高构建搜索体验的热情,渴望接受新事物和未知的挑战 • 沟通能力:与工程、产品、业务和客户团队的利益相关者进行沟通的能力