指令微调性能优化挑战赛

Who this competition fits

适合已经做过大语言模型指令微调、能在华为昇腾环境中使用MindSpeed-LLM的开发者或研究团队。参赛者还需要能准备合规的开源指令数据，并交付可运行代码、训练日志和微调后的模型文件。

From registration to a first submission

1. 01

   MindSpeed-LLM

2. 02

   昇腾芯片训练环境

3. 03

   Llama2-7B全参数微调

4. 04

   分布式并行策略

5. 05

   指令数据集构建

6. 06

   MMLU评估

Before you commit: 难点在于同时优化全参SFT的训练吞吐和模型效果：既要通过并行策略、算子或算法优化提高样本处理速度，又要兼顾MMLU与多轮对话表现。提交不仅是结果，还需提供数据集链接、完整流程文档、可跑通代码、日志和模型检查点，并保证作品可脱离原开发环境运行。