RWKV

RWKV 教程首页

RWKV 教程系列提供 RWKV 从入门(体验在线 demo)到精通(本地部署、微调、预训练)的全教程。

RWKV 入门教程

入门教程主要介绍 RWKV 模型的种类和下载方法在线体验方法,以及如何改善 RWKV 模型的生成质量

在线体验和模型下载

改善 RWKV 模型的生成质量

RWKV 中级教程

中级教程包含 RWKV 的各种本地部署方法和推理教程

RWKV 模型本地部署工具

其他热门模型推理工具

热门模型推理工具
RWKV 模型也适配了其他热门的开源模型部署和推理工具,如 llama.cpp、Ollama。
badge 13

RWKV 高级教程

高级教程包含 RWKV 模型的预训练、微调和 RLHF 等训练方法

微调简介和准备工作

微调简介和准备工作
为什么要微调 RWKV 模型?微调之前需要准备什么?
badge 13

训练方法的详细教程

训练方法的详细教程
介绍 RWKV 模型的预训练、State Tuning、LoRA、Miss 等微调方法的详细教程
badge 13

预训练教程基于 RWKV-LM 仓库,训练流程和 RWKV 官方模型完全一致。

RWKV 官方微调仓库 RWKV-PEFT,包含常见的 LoRA 微调,也有 RWKV 模型特有的 State-Tuning 和 RWKV 社区成员 @JL-er 开发的 MiSS 微调方法。

这份文档对您有帮助吗?