[開源項目] 基于WebGPU的免安裝本地AI聊天機器人 (開發中) – 藍點網
早前谷歌在 Google Chrome Canary 版里發布了 WebGPU 項目,開源該項目可以讓開發者基于瀏覽器調用本機顯卡算力。項目
所以在 GitHub 上有開源團隊構建了 Web-LLM 項目,基于機器上海黃埔高級資源外圍大學生上門vx《1662+044+1662》提供外圍女上門服務快速選照片快速安排不收定金面到付款30分鐘可到達即基于 Web 的安裝大型語言模型,一切都在瀏覽器內運行,本地不需要服務器支持、聊天藍點不需要安裝、人開直接利用 WebGPU 特性運行。發中
這個項目可以大幅度簡化搭建 AI 聊天機器人的開源步驟,而且可以保護隱私,項目上海黃埔高級資源外圍大學生上門vx《1662+044+1662》提供外圍女上門服務快速選照片快速安排不收定金面到付款30分鐘可到達因為這個 AI 模型是基于機器 “你” 控制的,你提交的安裝數據不會被共享給開發者進行模型訓練。
這個項目還在開發中,本地有興趣的聊天藍點開發者可以參與該項目。
![[開源項目] 基于WebGPU的人開免安裝本地AI聊天機器人 (開發中)](https://img.lancdn.com/landian/2023/04/98381.png)
當然由于是相當于在本地運行的,所以顯卡性能至關重要,根據開源團隊說明, 顯存至少需要 6.4GB,所以如果你的顯卡顯存比較小的話可能無法運行。
必要條件:Google Chrome 113.0+、顯存至少為 6.4GB,使用不同的模型顯存要求可能還會增加。
項目地址:https://github.com/mlc-ai/web-llm
演示地址:https://mlc.ai/web-llm/#chat-demo
注:演示聊天使用的模型是 vicuna-7b-v0。








