职位:实习研究员 - 大型语言模型的高效架构
地点:蒙特利尔
职位描述
华为加拿大现有一个研究员实习职位空缺。
关于团队:
成立于2012年,诺亚方舟实验室已发展成为一个在学术界和工业界取得显著成就的研究组织。实验室的使命是推动人工智能及相关领域的发展,以造福公司和社会。实验室致力于影响深远的长期项目,旨在提升最先进的研究,同时将创新融入公司的产品和服务中,包括大型语言模型、强化学习、自然语言处理、计算机视觉、人工智能理论和自动驾驶。
关于职位:
- 协助提出和探索新颖的研究理念,以提高大型语言模型的效率和可扩展性。
- 参与应用研究项目,专注于支持长上下文大型语言模型,包括高效架构、数据策划和后训练方法的工作。
- 通过设计和执行实验、分析结果和展示发现,协作完成端到端项目。
- 在顶级机器学习和自然语言处理(NLP)会议上发表研究成果。
- 跟踪大型语言模型和人工智能生态系统的进展,将新发展转化为团队的可操作见解。
职位要求
理想候选人:
- 目前正在攻读计算机科学、软件工程或相关领域的博士或硕士学位。
- 对自然语言处理和大型语言模型(LLM)的基础知识和最先进的方法有深刻理解,并具有扎实的机器学习理论基础。
- 精通现代大型语言模型架构,包括Transformer模型(例如,Llama, Qwen),并对线性注意力模型(例如,GDN, Mamba, GLA)有良好的了解。
- 具备Python编程技能,精通PyTorch。具有训练和评估大型语言模型的经验。
- 熟悉扩散模型者优先。
- 优秀的口头和书面沟通能力。能够在协作的研究导向环境中工作。
华为旨在为其在魁北克的员工支持一个法语工作环境。我们已采取措施避免为该职位要求法语以外的语言。然而,英语能力对于该职位至关重要,原因如下:
该职位需要定期与位于魁北克以外的同事沟通,而英语是办公室间交流的主要语言。此外,该职位涉及的任务性质属于人工智能的高度专业化领域,也需要具备英语知识。