岗位描述
【职位描述】
1. 负责预训练数据的构建,包括领域分类、质量筛选、配比调整等;
2. 负责语言模型结构探索,包括高效的attention结构、降低部署成本的moe架构等;
3. 负责新的预训练scaling范式探索,包括预训练与RL的结合、可扩展的预训练数据合成方法等。
加分项:
1. 在ACL,NeurIPS,ICLR,EMNLP,ICML等顶级会议或期刊上发表过论文者优先;
2. 熟悉并行训练框架,有多机多卡训练经验者优先;熟悉大模型预训练 / SFT / RL 者优先。
锦鲤会替你打开官网网申、按简历自动填表提交,你只需要在关键步骤确认。
【职位描述】
1. 负责预训练数据的构建,包括领域分类、质量筛选、配比调整等;
2. 负责语言模型结构探索,包括高效的attention结构、降低部署成本的moe架构等;
3. 负责新的预训练scaling范式探索,包括预训练与RL的结合、可扩展的预训练数据合成方法等。
加分项:
1. 在ACL,NeurIPS,ICLR,EMNLP,ICML等顶级会议或期刊上发表过论文者优先;
2. 熟悉并行训练框架,有多机多卡训练经验者优先;熟悉大模型预训练 / SFT / RL 者优先。
先核对岗位要求与自己的经历,再准备档案、投递和面试。