【研1基本功 (真的很简单)LoRA 低秩微调】大模型微调基本方法1 —— bonus "Focal loss"
happy魇2024.05.2713 分钟8.3 万 播放36 弹幕
编辑手记 · 大模型读完弹幕后的判断
代码实操扎实,维度推导清楚,适合入门复现;原理图示偏少
手写LoRA低秩微调代码,逐行讲解A/B矩阵初始化与维度,附Focal Loss
- 适合谁
- 研一/大模型微调初学者
- 前置
- PyTorch基础、线性层概念
- 难度
- 中等 · ●●●○○
- 时效
- 常青 · 现在看仍然成立
- 类型
- 教程


