使用滴滴云弹性推理服务部署 Inception-v3 模型

本文详细介绍了如何使用滴滴云弹性推理服务EIS部署Inception-v3模型,包括准备模型文件、上传至S3、导入模型、创建推理服务以及执行推理任务的步骤,展示了EIS的易用性、高可用性和易管理性。
摘要由CSDN通过智能技术生成

滴滴云近期推出了弹性推理服务 EIS(Elastic Inference Service)。借助滴滴云 EIS 可快速将在主流深度学习框架上训练的模型发布为在线推理服务,性能较 TensorFlow Serving 有明显的提高。

相比较传统的推理服务发布模式,滴滴云弹性推理服务 EIS 具有如下特点:

  1. 易用:无需考虑基础架构,仅需关注模型和推理服务。
  2. 高可用:滴滴云弹性推理服务自带高可用保障和容错机制。
  3. 易管理:模型的升级等可一键完成。
  4. SLA 保障:根据购买的实例规格提供 QPS 保障。

本教程通过一个 Inception-v3 模型的例子说明如何在滴滴云弹性推理服务 EIS 上部署模型,进而使用该模型执行在线推理任务。本教程包括如下步骤:

  • 准备模型文件
  • 把模型文件上传到滴滴云对象存储服务 S3
  • 把模型文件从 S3 导入到EIS模型空间
  • 创建推理服务
  • 执行推理任务

准备模型文件

滴滴云弹性推理服务 EIS 目前支持 TensorFlow、Pytorch、Caffe、Caffe2 等主流深度学习框架。

在上传模型文件之前,请将模型文件压缩成 tar、tar.gz、tar.bz2、tgz、zip 中的任意一种压缩格式。

模型文件目录格式如下图所示&#x

  • 0
    点赞
  • 0
    收藏
    觉得还不错? 一键收藏
  • 0
    评论
评论
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值