Chapter6

输入“/”快速插入内容

Chapter6

飞书用户5190

2024年7月30日修改

1.基准测试与评估

建议阅读：

1.

NLP 基准测试中的挑战和机遇

2.

测量大规模多任务语言理解

3.

语言模型的整体评估

4.

2.高效的神经网络训练

建议阅读：

1.

混合精度训练

2.

ZeRO：针对训练万亿参数模型的内存优化

3.

PyTorch FSDP：扩展完全分片数据并行的经验

4.

LoRA：大型语言模型的低秩自适应

项目里程碑