精选/计算机技术

【手把手带你实战HuggingFace Transformers-低精度训练篇】LLaMA2训练细节补充

你可是处女座啊2023.11.0415 分钟8,554 播放44 弹幕

编辑手记 · 大模型读完弹幕后的判断

有具体bug复现与修复思路,代码开源可复现,适合动手跟练

补充LLaMA2低精度训练细节,修复上期疏漏,含pad_token与eos_token不一致等踩坑排查

适合谁
已入门LLM微调的开发者
前置
PyTorch与Transformers基础
难度
中等 · ●●●○○
时效
有时效 · 部分工具已变
类型
实战

关于这份清单

让每一次观看,
都更有收获。

01

先筛选,再推荐

从 3,652 条候选中,经过相关性与质量规则筛选。

02

看见内容价值

结合互动信号、简介与弹幕,生成内容判断和观看理由。

03

找到适合你的

了解适合人群与前置知识,再决定从哪一课开始。