FastChat 本地化安装部署-拥有属于私人的ChatGPT

编程知识 更新时间:2023-05-02 03:04:01

写在前面:第一发稿把自己熬夜几天的一些经历写下来,希望能给AI爱好者一个前车之鉴,自从看到斯坦福-ALPACA项目就想着能否能否本地化部署一套AI CHAT,所以找了很多网站,都没有FastChat部署能很完整的写下来,所以有了本文:

1 前期准备:  N卡(24G以上显存),16G内存 ,i5以上的CPU

2 操作系统:Ubuntu 22.04    https://ubuntu/download/desktop/thank-you?version=22.04.2&architecture=amd64

3 安装N卡驱动:

3.1 选择系统自带的Nk驱动

3.2 下载最新的   官方驱动 | NVIDIA

3.3 使用nvidia-smi确认驱动是否安装成功

4 安装环境:

sudo apt update
sudo apt install tmux htop

wget https://repo.anaconda/archive/Anaconda3-2022.10-Linux-x86_64.sh
bash Anaconda3-2022.10-Linux-x86_64.sh

conda create -n fastchat python=3.9
conda activate fastchat


git clone https://github/lm-sys/FastChat.git   
#如果失败加上https://ghproxy/https://github/lm-sys/FastChat.git 
cd FastC

更多推荐

FastChat 本地化安装部署-拥有属于私人的ChatGPT

本文发布于:2023-04-25 10:24:00,感谢您对本站的认可!
本文链接:https://www.elefans.com/category/jswz/5efe12161128453a9e4b32fc636e7174.html
版权声明:本站内容均来自互联网,仅供演示用,请勿用于商业和其他非法用途。如果侵犯了您的权益请与我们联系,我们将在24小时内删除。
本文标签:私人   FastChat   ChatGPT

发布评论

评论列表 (有 0 条评论)
草根站长

>www.elefans.com

编程频道|电子爱好者 - 技术资讯及电子产品介绍!

  • 102893文章数
  • 26171阅读数
  • 0评论数