NLP大模型研发工程师

岗位职责：
1、负责NLP大模型分布式训练框架维护，能够在多个超算平台实现模型的稳定性训练；
2、负责NLP大模型无监督预训练、指令微调、RLHF等算法的研究与训练策略优化；
3、负责instruction tuning核心数据的构建和相关技术的探索；
4、参与NLP大模型业务场景落地的方案设计；

岗位要求：
1. 具有自然语言处理、计算机等相关专业硕士及以上学历；
2. 优秀的编程能力，熟练使用python, 熟悉主流深度学习工具Pytorch等；
3. 熟悉NLP领域的前沿研究，具有丰富的研究经验，在ACL、EMNLP、NAACL、TASLP、TACL等学术会议和期刊上发表过NLP相关论文的优化；
4. 熟悉分布式深度学习训练技术，具有Megatron-deepspeed调试训练5B以上模型经验优先；
5. 熟悉NLP大模型的背景知识，具有指令微调经验优先；
6. 善于团队合作，具有强烈的自我驱动力和良好的沟通能力；