L1-8G 显存玩转书生大模型 Demo

基础任务

使用 Cli Demo 完成 InternLM2-Chat-1.8B 模型的部署,并生成 300 字小故事

进入开发机

激活环境配置

通过conda activate /root/share/pre_envs/icamp3_demo激活环境,出现(/root/share/pre_envs/icamp3_demo) 即为激活成功

Cli Demo 部署 InternLM2-Chat-1.8B 模型

创建一个目录,用于存放代码。并创建一个 cli_demo.py

通过 python /root/demo/cli_demo.py 来启动 Demo

生成 300 字小故事

Streamlit Web Demo 部署 InternLM2-Chat-1.8B 模型

启动一个 Streamlit 服务

本地的 PowerShell 中输入命令,将端口映射到本地

通过浏览器访问 http://localhost:6006 来启动 Demo

进阶任务

使用 LMDeploy 完成 InternLM-XComposer2-VL-1.8B 的部署,并完成一次图文理解对话

使用 LMDeploy 完成 InternVL2-2B 的部署,并完成一次图文理解对话

  • 9
    点赞
  • 1
    收藏
    觉得还不错? 一键收藏
  • 0
    评论
评论
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值