Guanaco

Guanaco是华盛顿大学NLP小组发布的QLoRA方法的预训练结果模型，基于LLaMA微调。包含4个版本：

QLoRA是一种非常高效的大模型预训练技术，可以支持在单张专业级显卡微调650亿参数规模的大模型，具有很好的效果。关于QLoRA技术的简介： https://www.datalearner.com/blog/1051685029967582 

注意，Guanaco模型基于LLaMA模型微调得到，受限于LLaMA不允许商用的限制，Guanaco也不能商用！