Unity如何导入onnx模型

已于 2023-03-20 15:46:06 修改
阅读量1.5k 收藏 8
点赞数 3
分类专栏： Unity专栏 文章标签： unity 游戏引擎 c#
于 2023-03-20 15:40:49 首次发布
版权声明：本文为博主原创文章，遵循 CC 4.0 BY-SA 版权协议，转载请附上原文出处链接和本声明。
本文链接：https://blog.csdn.net/vitomian/article/details/129668742
版权

Unity如何导入Onnx模型

第一步：导入第三方库

首先通过NuGet包管理器进行对应的库package安装，从而能够拿到dll
在这里插入图片描述
这里如果Unity的VS中Nuget包管理方案是灰色的，以及如何找到合适版本的第三方dll，可以参考钥匙君另一篇博客的方法二：
Unity导入第三方库

第二步：拖入dll

安装完后在Unity的项目根目录下面的Package文件夹下面将会有2个文件夹
**加粗样式**
分别将这两个文件夹下的如下路径dll和相关文件拖入到自己Unity项目的根目录的Plugins文件夹下，注意的一点是要看你Unity的匹配的.NetCore版本，比如我这里是netstandard2.0文件夹下的dll就可以
在这里插入图片描述
在这里插入图片描述
拖入dll后的样子类似下图
在这里插入图片描述

第三步：调用onnx模型

这里直接参考用C#调用的方式即可，详见钥匙君这篇博客;C#调用Onnx模型

第四部：可能的问题

在第三步后可能还有一些依赖的库在Unity中需要也拖入到Plugins，同样按照第二步的方法在package中找到如下三个文件夹，找到对应的dll也拖入到Plugins文件夹下
在这里插入图片描述

灵魂钥匙
关注
  • 3
    点赞
  • 踩
  • 8
    收藏
    觉得还不错? 一键收藏
  • 2
    评论
专栏目录
在C＃中使用可移植的ONNX AI模型
04-05
在本文中，我简要介绍了ONNX运行时和ONNX格式。
在Unity3d使用yolov8的onnx模型
shenqingyu0605202324的博客
08-17 2631
输出OUTPUTS是float32[1,35,8400]，表示它会输出一个大小为[1, 35, 8400]的浮点数张量。这个输出张量的维度表示了检测到的目标的数量、每个目标的预测参数以及网格单元的数量。输出张量的第一个维度1表示检测到的目标数量。每个目标由35个值组成，表示目标的类别、置信度、边界框的坐标及10个特定点的位置。要取得8400个数据中置信度最高的数据，然后获取该数据其他channel的数据。运行结果：（蓝色是检测手的边框，红点是自定义的点），其中的四个数字分别表示不同的维度。
使用 Unity Sentis 和 Compute Shader，2d106det.onnx 进行高效人脸网格标记
m0_55632444的博客
05-31 417
在计算机视觉领域，人脸网格标记是一项重要的任务，用于识别人脸关键点和特征。本文将介绍如何使用 Unity Sentis 和 Compute Shader，结合模型，实现高效的人脸网格标记。我将提供完整的代码示例。
Unity使用sherpa-onnx实现离线语音合成
不忘初心 方得始终
05-14 453
Unity使用sherpa-onnx实现离线语音合成
Unity部署ONNX模型与训练验证不一致问题
最新发布
qq_54220687的博客
06-30 402
使用全连接神经网络训练了一个模型，并将模型格式转为ONNX，可以在Unity中部署的模型格式。但是遇见在python中验证输入-输出的关系时正确的，但是在unity中却出现输入输出不一致问题。最终经过一番查找发现了问题所在，我在在Python中，对输入数据进行了标准化处理。因此在Unity中需要对输入数据执行相同的标准化过程。
TFClassify-Unity-Barracuda：将Tensorflow和ONNX模型与Unity Barracuda推理引擎一起用于图像分类和对象检测的示例
02-06
什么 这是在Unity应用程序中使用经过TensorFlow或ONNX训练的模型进行图像分类和对象检测的示例。 它使用-请注意，梭子鱼仍处于开发预览阶段，并且经常更改。 在我的更多详细信息。 分类结果： 检测结果： 如果您正在寻找类似的示例，但使用TensorflowSharp插件而不是梭子鱼，请参阅我 。 怎么样 您需要Unity 2019.3或更高版本。 2019.2.x版本似乎在WebCamTexture和Vulkan中存在一个错误，导致内存泄漏。 在Unity中打开项目。 从Window -> Package Maanger安装Barracuda 0.4.0-preview
【Unity Sentis应用-手写数字识别】
weixin_43559607的博客
02-20 995
本文介绍的是使用Unity的AI工具Sentis，结合ONNX大模型，匹配手写数字的识别结果的简单应用。Unity Sentis是一款无缝集成自定义AI模型的工具，专为Unity引擎设计。该工具可以在Unity运行的各个平台上流畅运行，无需额外的优化。Unity Sentis允许大家将神经网络嵌入到他们的构建中，从而提供实时的体验，增强游戏玩法和功能在不同平台上的表现。
ml-agents在导出的unity环境部署训练模型onnx
hanshuning的专栏
09-14 789
import onnx import mlagents import onnxruntime as ort import numpy as np import time import torch import math import gym import tensorflow as tf from gym_unity.envs import UnityToGymWrapper from mlagents_envs.environment import UnityEnvironment from mlagen
Unity Barracuda:解决OnnxImportException: Unexpected error while parsing layer *** of type Split.
Mukae1997的博客
10-28 2755
我的模型是从paddle-detection导出并使用paddle-onnx转换的 先用https://netron.app/找出带split的节点 点击查看，找到split属性 如果没有就按output的个数构造，比如下面这个有4个输出就是[1,1,1,1] 然后下载https://github.com/Unity-Technologies/barracuda-release/issues/138里面维护者的代码： https://github.com/Unity-Technologies/barrac
使用 Unity Barracuda 和 Compute Shader 进行高效人脸识别
m0_55632444的博客
05-23 1453
Unity Barracuda 是一个为 Unity 开发的跨平台深度学习推理库，支持 ONNX（开放神经网络交换格式）。它使得在游戏和应用中集成和运行深度学习模型变得简单快捷。
onnxmltools：ONNXMLTools支持将模型转换为ONNX
02-04
ONNXMLTools使您能够将模型从不同的机器学习工具包转换为 。 当前支持以下工具包： （ 的包装） Tensorflow（ 的包装） scikit-learn（ 的包装） 苹果酷睿ML Spark ML（实验性） LightGBM 的libsvm XGBoost ...
onnx-lab-master.zip
10-19
像ONNX Model Zoo 这样的集合让你很容易找到下一个顶级模型。但是，如果找到的模型不是您想要使用的格式，该怎么办？我们真正需要的是便携式神经网络——这正是ONNX格式所提供的
yolov8s在unity中的应用
06-07
1. **模型加载**：使用Unity内置的插件或者第三方库如TensorFlowSharp、ONNXRuntime等来加载Yolov8s的模型权重。这一步确保Unity可以在运行时使用模型。 2. **图像预处理**：预处理步骤包括将RGB图像转换为模型所需...
FaceFusionSharp OnnxRuntime版 视频换脸.rar
06-19
结合OnnxRuntime，这个项目提供了高效的模型运行环境，使得复杂的深度学习模型能够在各种平台和设备上流畅运行。 OnnxRuntime是由微软开发的高性能预测引擎，支持ONNX（Open Neural Network Exchange）格式的机器...
IrisBarracuda:Unity Barracuda的MediaPipe虹膜界标模型
04-16
艾里斯梭子鱼 IrisBarracuda是虹膜界标检测器，...关于ONNX文件使用转换了此存储库中包含的ONNX模型文件。 它还用于解决一些ONNX兼容性问题。 请检查笔记本以获取更多详细信息。致谢该存储库包含来自一些库存照片。 ，
将改进后的yolo网络导出onnx，使用Unity的Barracuda导入时遇到的问题（持续更新
woshi212534的博客
11-05 553
convnextv2中，作者设计的新BLock中存在一个GRN层，里面用到了torch.norm，这个东西转成ONNX会变成ReduceL2。我这里只是为了跑通流程，所以解决方法简单粗暴。直接把用到GRN层的地方注释掉，这样会导致网络精度下降等一系列问题，后续有时间我会重构一下这里。原因在于截止到最新的barracuda3.0，仍未支持ReduceL2（Unity的捞逼效率。对yolov8进行了修改，将主干修改为convnextv2，并导出为onnx。在这里可以查看目前支持的onnx层类型。
测试DWPose的onnx +Unity barracuda
Mukae1997的博客
08-08 1234
推测还是因为barracuda这边处理split节点有点问题，但是实在不知道怎么修复。报了一些错，但是实在没查到对应的解决方法，放弃了。
使用 C# 和 ONNX Runtime 加载和运行 ONNX 模型
baidu_31718835的博客
06-15 7501
今天突然有人和我说想要实现windows环境下c#调用tensorflow模型，我想着ONNX不是可以搞嘛，然后我翻了一下以前做的，没翻到，就查询了下资料，鼓捣出来了下面将介绍如何使用 C# 和 ONNX Runtime 库加载并运行 ONNX 模型。ONNX是啥我就不说了，留个链接。废话不说，show me code！在本篇博客中，我们展示了如何使用 C# 和 ONNX Runtime 库加载和运行 ONNX 模型。
Pytorch网络模型转Onnx格式，多种方法（opencv、onnxruntime、c++）调用Onnx
qq_44747572的博客
10-18 6794
文章目录1. Torchvison模型推理2. Pytorch -> Onnx3. Opencv 调用 Onnx4. Onnxruntime 调用 Onnx5. C++调用Onnx 1. Torchvison模型推理 import torch import torchvision import cv2 import onnx import numpy as np import timm import os from PIL import Image from torchvision import tr
unity调用onnx模型
08-19
在Unity中调用ONNX模型，你需要使用Unity的机器学习工具包（MLAPI）和ONNX Runtime。以下是一些基本步骤： 1. 下载并安装Unity的机器学习工具包（MLAPI）插件。你可以在Unity Asset Store中搜索并下载插件。 2. 将你的ONNX模型导入到Unity项目中。可以将ONNX模型文件直接拖拽到Unity的Project视图中，或者使用命令行工具将其转换为Unity可识别的格式。 3. 创建一个C#脚本来加载和运行ONNX模型。你可以使用MLAPI提供的API来加载和运行模型。 4. 在你的代码中，使用ONNX Runtime来加载模型并进行推理。可以通过调用ONNX Runtime的API来加载模型文件，并将输入数据传递给模型进行推理。 5. 处理模型的输出结果。ONNX Runtime会返回一个输出张量，你可以通过访问其数据来获取模型的输出结果。 请注意，这只是一个概述，并且具体的实现细节可能因你的项目和ONNX模型而有所不同。你还可以参考Unity的MLAPI文档和ONNX Runtime的文档，以获取更详细的信息和示例代码。
评论 2
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值