使用tvm在jetson-nano的arm-cpu上部署优化AI模型

1.安装部署tvm环境
在jetson-nano和x86 linux服务器(本文使用win10的WSL子系统)上分别部署安装tvm,可以参考ubuntu环境安装编译tvm

1.启动rpc Tracker
在x86 linux上,执行

python3 -m tvm.exec.rpc_tracker --host=0.0.0.0 --port=9190

2.注册rpc Server
在jetson-nano上执行

python3 -m tvm.exec.rpc_server --tracker=host_ip:9190 --key=jetson-nano

查询注册导tracker的server

python3 -m tvm.exec.query_rpc_tracker --host=0.0.0.0 --port=9190

出现以下打印则说明注册成功,此时可通过rpc将jetson-nano和x86连接起来

Tracker address 0.0.0.0:9190

Server List
----------------------------
server-address  key
----------------------------
192.168.2.109:9090      server:jetson-nano
----------------------------

Queue Status
-----------------------------------
key           total  free  pending
-----------------------------------
jetson-nano   1      1     0
-----------------------------------

  • 1
    点赞
  • 1
    收藏
    觉得还不错? 一键收藏
  • 1
    评论
评论 1
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值