模型训练与对齐

本分类共 9 个专题 · 761 道题

已筛选

共 761 道题

排序:

0541
LoRA 有哪些缺点和改进方向?
模型训练与对齐参数高效微调
比较选型已有答案
进阶
0633
给定 7B 模型,如何计算 LoRA 参数及优化器显存分配?
模型训练与对齐参数高效微调
原理机制已有答案
进阶
0634
了解哪些强化学习优化算法?
模型训练与对齐强化学习与奖励
比较选型已有答案
基础
0679
强化学习训练中的 Reference Model 起什么作用?
模型训练与对齐强化学习与奖励
原理机制已有答案
基础
1234
PPO 与 TRPO 有何区别?
模型训练与对齐强化学习与奖励
比较选型
进阶
1430
CPU 调度过慢时如何提高 CPU/GPU 协同效率?
模型训练与对齐分布式训练与计算硬件
方案设计
进阶
1743
奖励项重要程度不同时,如何平衡各项权重?
模型训练与对齐强化学习与奖励
项目深挖
进阶
1750
手写 PPO Loss。
模型训练与对齐强化学习与奖励
代码题
深入
2018
模型效果不好时,如何判断问题来自预训练、后训练还是数据?
模型训练与对齐训练框架、调参与排障
故障排查
进阶
2021
Mid-training 与 Post-training 有什么区别?
模型训练与对齐预训练、续训与 SFT
比较选型
进阶