yuanbw / chatgpt_all

学习开源chatGPT类模型的指南，汇总各种训练数据获取、模型微调、模型服务的方法，以及记录自己操作总遇到的各种常见坑，欢迎收藏、转发，希望能帮你省一些时间

chatgpt_all 一站式本地GPT搭建工具

介绍

一个all_in_one合集，包含大模型微调、部署、langchain开发，方便大家使用 初步设想几个部分：

• langchain例子：
  • 简单的QA智能客服
  • 简单的聊天机器人
  • 简单的Agent实现
  • 简单的text2SQL
• 统一微调
  • LLaMa2
  • Baichuan
  • chatglm2-6b
• 统一api
  • chatglm2-6b
  • Baichuan
  • LLaMa2
• 讲课demo快速入口，按时间排序
  • 用友demo
  • 华为demo

说明

欢迎大家关注，后续持续更新，做方便你用的工具

其他说明:

如果要搭建一个本地的chatGPT模型，需要借助开源的力量，大体上要解决两个主要问题：基础大模型用什么，怎么用指令微调(instruction)。开源项目众多，鱼龙混杂，这么一个索引式记录可以让大家少走弯路，欢迎贡献。

数据

预训练数据： 指令数据：

热门项目汇总

项目名称	github地址	基础大模型	训练方法	备注
Alpaca	https://github.com/tatsu-lab/stanford_alpaca	LLaMA	Alpaca	大家熟知的羊驼，入门推荐
Alpaca	https://github.com/Facico/Chinese-Vicuna	LLaMA	Vicuna	一个中文低资源的llama+lora方案

加微信交流群，备注: 公司/学校-方向