跳到正文
原文
dongxi_nlp· @dongxi_nlp · X·· 4 天前AI 评分18

Alpaca 指令微调解析

AI 导读

斯坦福团队在 2023 年 3 月用 Meta 的 LLaMA 7B 训练出能按指令回答问题的模型 Alpaca。LLaMA 7B 原本只做过预训练,只会预测下一个词。该内容为 Post training 系列第二篇,聚焦指令微调。

正文

Post training 系列文章第二篇,关于指令微调。
2023 年 3 月,斯坦福的一个团队用 Meta 的 LLaMA 7B 训练出了能按指令回答问题的模型 Alpaca。LLaMA 7B 原本只做过预训练,只会预测下一个词。

来源:dongxi_nlp · x.com