本地化搭建媲美ChatGPT的中国对话模型ChatGLM2-6B

83fe9c575be384dc4fd30860dbad5a68.gif

点击"仙网攻城狮”关注我们哦~

不当想研发的渗透人不是好运维10778e1be5173959aaf58f63b432c0d5.png

让我们每天进步一点点

简介

ChatGLM2-6B发布了详情查看:

https://github.com/THUDM/ChatGLM2-6B

一个在各个方面和chatGPT4媲美的中国语言对话模型,主要是可以本地化部署,对于配置要求不是太高,不需要GPU的情况下速度还行,可以在各个平台上运行,本文是在centos7上安装运行,支持网页Demo、命令行Demo、API部署。

b9999ae12e28b91ec88f0ff4ff53fe9a.png

实战

1.安装环境并下载模型

注意:python版本需要3.7以上

git clone https://github.com/THUDM/ChatGLM2-6B
cd ChatGLM2-6B
mkdir THUDM
yum install git-lfs
cd THUDM
git clone https://huggingface.co/THUDM/chatglm2-6b
python3 -m pip install gradio==3.28.3
cd ../
python3 -m pip install -r requirements.txt -i http://mirrors.aliyun.com/pypi/simple/ --trusted-host mirrors.aliyun.com

2.修改web_demo.py文件,设置cpu模式和网络。

#修改为下面内容
model = AutoModel.from_pretrained("THUDM/chatglm2-6b", trust_remote_code=True).float()
demo.queue().launch(share=True, inbrowser=True,server_name='0.0.0.0',server_port=7800)

配置cpu模式

5b7ea8412ab40476a3da1594a1ce0e13.png

配置网络

21294e57750b50848250f0f27ef2dec2.png

3.运行web_demo.py

python web_demo.py

4.访问即可,远程访问查看自己的ip是多少,ip:端口即可,然后就可以得到一个无限制的对话AI

b45d2eb8e704e05703d8907c1fd554d7.png

往期内容

Stable DiffusionAI绘画一键启动整合包

能让你躺着挖洞的BurpSuite插件

一键启动+AWVS+Sqlmap+BurpSutie+Xray多级代理联合挖洞

3d56a78338fb16b68b85331fd6c66617.gif

9cf136ff8863becdd1fa8041236731de.gif

更多资讯长按二维码 关注我们

   专业的信息安全团队,给你最安全的保障。定期推送黑客知识和网络安全知识文章,让各位了解黑客的世界,学习黑客知识,普及安全知识,提高安全意识。

觉得不错点个“赞”呗0318f998d08d684126432516684a8f28.png      

  • 0
    点赞
  • 1
    收藏
    觉得还不错? 一键收藏
  • 0
    评论

“相关推荐”对你有帮助么?

  • 非常没帮助
  • 没帮助
  • 一般
  • 有帮助
  • 非常有帮助
提交
评论
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值