手把手家教你进行ChatGPT私有化部署

背景

随着AI技术的不断成熟，加上ChatGPT如火如荼的发布新版本迭代更新，人工智能的热度也升温到史无前例的高度。我们有理由相信，现在身边还不愿主动去接触这项技术，深入了解的小伙伴，在不久的将来，一定会被时代淘汰，至少幸存下来的成本会比我们低很多。言归正传，前段时间注册了ChatGPT的账号后，也尝试部署了Telegram版本的ChatGPT聊天功能，颇为成功，当时用的还是OpenAI的API。最近想着既然ChatGPT发布了自己的API，民间会不会有些新的动作？果不其然，网上已经有大神完成了私有的版本，这使得部署在本地，训练属于自己的AI成为可能！

部署

本地化部署起来并不难，有些网络和Linux基础的童鞋会更加容易些。

准备一个满足要求的Linux系统环境

我这里用的是以下环境：CentOS Linux release 7.9.2009 (Core) 这里假定读者都是没有安装OS的门槛的，同时也有自己可用的代理套件，就不再赘述。

进行部署

使用git将工程文件clone下来，进入到目录后，复制一份配置文件出来

git clone https://github.com/869413421/chatgpt-web.git
cd chatgpt-web/
cp config.dev.json config.json

编辑配置文件config.json 粘贴入以下信息，这里的api_key需要替换成你自己的。 port和proxy都是可以自行定义的。显然在国内不定义proxy基本上是没法用的。

{
  "api_key": "sk-tnsMqcfmpyz6kExx5EuR88TbkFJ8OUzsCPyH2oIci",
  "port": 9999,
  "listen": "",
  "bot_desc": "Kiss me more.",
  "proxy": "http://10.11.100.44:1080",
  "model": "gpt-3.5-turbo-0301",
  "max_tokens": 512,
  "temperature": 0.9,
  "top_p": 1,
  "frequency_penalty": 0.0,
  "presence_penalty": 0.6,
  "auth_user": "",
  "auth_password": ""
}

安装go编译语言工具由于该项目使用go语言编写，所以需要有相应的语言工具来执行程序。

yum install go
go mod download github.com/alecthomas/kong
go get github.com/869413421/chatgpt-web/bootstarp
go get github.com/869413421/chatgpt-web/app/http/controllers

执行以下命令即可启动服务 go run main.go 首次执行后，命令会卡10秒左右，然后看到这样的输出画面

启动后，就可以在本地浏览器里通过URL进行访问。我这里Server的IP为10.21.100.94，那么网址就是http://10.11.100.19:9999

成功访问后，在后台是可以看到反馈的

设置为系统服务

每次都用那个命令启动服务，会比较繁琐。我们一般都习惯于使用systemctl start/stop service_name来开启和停止服务。

这里可以将执行语句定义为一个Service。新建服务。 touch /lib/systemd/system/chat.service 然后编辑： vi /lib/systemd/system/chat.service

[Unit]
Description=ChatGPT Test

[Service]
User=root
Group=root
Type=simple
Restart=always
RestartSec=20
StartLimitInterval=0
Nice=10
WorkingDirectory=/root/downloads/chatgpt-web/
ExecStart=/usr/lib/golang/bin/go "run" "/root/downloads/chatgpt-web/main.go"
StandardOutput=null
TimeoutStartSec=30

[Install]
RequiredBy=multi-user.target

注意：这里的WorkingDirectory和ExecStart是我自己的目录，你需要修改为你存放项目文件的目录。

这里的几个参数可以解释下：