本地模型对话
在台式机或笔记本上运行大语言模型并进行问答,无需为本地推理调用在线 API,也不要求配备 GPU。
BAIZE AI RESOURCE
Gpt4all
GPT4All 是一款可在个人电脑上运行大语言模型的桌面应用,让用户不依赖在线 API 即可进行本地对话,也可借助 LocalDocs 围绕自己的文档提问,适合希望在本机使用 AI、减少资料外传的用户。

GPT4All 是一款在个人电脑上运行大语言模型的桌面应用,面向希望在本机进行 AI 对话、减少对在线接口依赖的用户。安装适合操作系统的客户端并下载模型后,就可以在电脑上提问和获取生成内容;运行本地模型不要求 GPU 或在线 API。需要针对自己保存的资料提问时,可以使用 LocalDocs 与本地文档对话。项目提供 Windows、macOS 和 Linux 安装包,其中 Linux 桌面版本仅支持 x86-64;仓库也提供 Python 包,方便有编程需求的用户在脚本中调用模型。首次获取客户端和模型需要下载,离线使用前应先准备好所需模型。
在台式机或笔记本上运行大语言模型并进行问答,无需为本地推理调用在线 API,也不要求配备 GPU。
通过 LocalDocs 与本地资料对话,围绕个人文档内容提问,无需把文档交给在线聊天服务处理。
提供 Windows、macOS 和 Linux 桌面安装包,可在支持的电脑系统上安装使用。
仓库另提供 Python 包,可在脚本中加载模型并调用 generate 生成文本,供需要编程调用的用户使用。
使用场景希望在个人电脑上使用大语言模型的用户
在桌面客户端安装并下载可用模型后,输入问题进行本地对话,获取模型生成的回答。
使用场景需要查询个人文档内容的用户
将本地资料加入 LocalDocs,再针对资料提问,通过本地模型与自己的文档对话。