安装 NVIDIA Chat with RTX

0. NVIDIA Chat with RTX 是什么?

Chat With RTX 是一款演示应用程序,可让您个性化连接到您自己的内容(文档、笔记、视频或其他数据)的 GPT 大语言模型 (LLM)。利用检索增强生成 (RAG)、TensorRT-LLM 和 RTX 加速,您可以查询自定义聊天机器人以快速获得上下文相关的答案。由于它全部在您的 Windows RTX PC 或工作站上本地运行,因此您将获得快速、安全的结果。

1. 安装 NVIDIA Chat with RTX

在这里插入图片描述

在这里插入图片描述

在这里插入图片描述
在这里插入图片描述

Note:安装目录里面不要有空格

在这里插入图片描述
在这里插入图片描述

2. 使用 NVIDIA Chat with RTX

从启动脚本中可知,NVIDIA Chat with RTX 支持2种模型,

  • “Mistral 7B int4”
  • “Llama 2 13B int4”
    在这里插入图片描述

NVIDIA Chat with RTX 启动后,后自动打开浏览器,我们就可以使用了,
在这里插入图片描述
问一个问题试一试,

在这里插入图片描述

3. NVIDIA Chat with RTX 下载地址

访问 https://www.nvidia.com/en-us/ai-on-rtx/chat-with-rtx-generative-ai/ 进行下载。

完结!

  • 26
    点赞
  • 22
    收藏
    觉得还不错? 一键收藏
  • 47
    评论
评论 47
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值