这个项目还在开发中，开源

项目地址：https://github.com/mlc-ai/web-llm

演示地址：https://mlc.ai/web-llm/#chat-demo

注：演示聊天使用的项目模型是 vicuna-7b-v0
。你提交的基于机器数据不会被共享给开发者进行模型训练
。该项目可以让开发者基于浏览器调用本机显卡算力
。安装直接利用 WebGPU 特性运行
。本地所以显卡性能至关重要 ，聊天蓝点根据开源团队说明，人开一切都在浏览器内运行 ，发中

当然由于是相当于在本地运行的，

早前谷歌在 Google Chrome Canary 版里发布了 WebGPU 项目 ，人开不需要服务器支持、

必要条件 
：Google Chrome 113.0+ 、不需要安装
、有兴趣的开发者可以参与该项目。显存至少为 6.4GB ， 显存至少需要 6.4GB，

所以在 GitHub 上有开源团队构建了 Web-LLM 项目 ，

这个项目可以大幅度简化搭建 AI 聊天机器人的步骤，而且可以保护隐私 ，