海思NNIE开发（四）:NNIE模块读入JPEG图片或视频

最新推荐文章于 2022-04-09 17:08:35 发布
最新推荐文章于 2022-04-09 17:08:35 发布
阅读量8.3k 收藏 28
点赞数 5
分类专栏： 海思NNIE 文章标签： 海思NNIE
版权声明：本文为博主原创文章，遵循 CC 4.0 BY-SA 版权协议，转载请附上原文出处链接和本声明。
本文链接：https://blog.csdn.net/zh8706/article/details/100078655
版权

系列文章

海思NNIE开发（一）：海思Hi3559AV100/Hi3519AV100 NNIE深度学习模块开发与调试记录

海思NNIE开发（二）：FasterRCNN在海思NNIE平台上的执行流程（一）

海思NNIE开发（三）：FasterRCNN在海思NNIE平台上的执行流程（二）

海思NNIE开发（四）:NNIE模块读入JPEG图片或视频

海思NNIE开发（五）：基于Hi3559AV100的FasterRCNN、RFCN、SSD、Yolov2、Yolov3性能综合测评

-------------------------------------------------------------------------------------------------------------------------------------------------

海思提供的Sample的网络文件（即.wk文件）仅支持bgr格式图片，该wk文件对应的prototxt文件中设置了输入图片的颜色空间为BGR格式，每次放入测试图片时都要转为bgr格式稍显麻烦，其实还有一种方法直接读入JPEG格式图片，方法就是调用VDEC模块，而VDEC模块解码出来的是YUV颜色空间图像，因此还需要将.wk文件的颜色空间转为YVU格式，处理流程如下：

使用VDEC模块需要绑定VPSS模块，使用VPSS模块还有个好处就是可以对图片进行缩放，VPSS模块转换为2路输出，一路将图片或视频转换为网络模型所需要的分辨率，再经过NNIE处理；另一路转换为输出所需要的分辨率如1920x1080；NNIE处理的结果经过VGS模块叠加在1920x1080分辨率图片/文件上，再经过VO输出。

真实的输出结果如下：

夜风里唱
关注
专栏目录
海思 NNIE 芯片开发笔记
专注计算机视觉算法训练，算法优化部署以及SDK开发的知识分享。
04-26 943
NNIE 是Neural Network Inference Engine 的简称，是海思媒体 SoC 中专门针对神经网络特别是深度学习卷积神经网络进行加速处理的硬件单元，可以理解为 CNN 加速器。
海思NNIE开发（一）：海思Hi3559AV100/Hi3519AV100 NNIE深度学习模块开发与调试记录
夜风里唱的专栏
10-20 3万+
海思NNIE开发系列文章： 海思NNIE开发（一）：海思Hi3559AV100/Hi3519AV100 NNIE深度学习模块开发与调试记录 海思NNIE开发（二）：FasterRCNN在海思NNIE平台上的执行流程（一） 海思NNIE开发（三）：FasterRCNN在海思NNIE平台上的执行流程（二） 海思NNIE开发（四）:NNIE模块读入JPEG图片或视频 海思NNIE开发（五）：基...
NN(Neural Network神经网络)
If you can dream it,you can do it.
08-13 4552
NN(Neural Network神经网络)： 　　ANN(ArtificialNeural Network 人工神经网络)，BP(Error Back Propagation 误差反向传播)，HN（Hopfield Network）， 　　RNN(Recurrent Neural Network，循环神经网络），SRN（Simple Recurrent Network，简单的循环神经
NNIE
u010451780的专栏
07-02 1788
https://blog.csdn.net/ywcpig/article/details/85260752 1. NNIE介绍 NNIE 是 Neural Network Inference Engine 的简称,是海思媒体 SoC 中专门针对神经网络特别是深度学习卷积神经网络进行加速处理的硬件单元,支持现有大部分的公开网络,如 Alexnet、VGG16、Googlenet、Resnet18、Resnet50 等分类网络,Faster R- CNN、YOLO、SSD、RFCN 等检测网络,以及 Seg
海思AI芯片(Hi3519A/3559A)方案学习（十一）分析bgr文件格式
ltshan139的专栏
04-17 7252
前言 3519A nnie SDK只支持BGR以及yuv格式的数据输入。那么当手头刚好只有jpeg/png等图片文件时，怎么来进行目标识别呢？一般的思路是用opencv来读取图片文件，然后再转换成BGR/YUV等格式，最后扔到NNIE模块来进行深度学习推理。 BGR文件数据格式 nnie sample里面提供的测试图片有后缀名为bgr的文件，例如dog_bick_car.bgr。在sam...
【yolov4-tiny】三、NNIE小结
加盐
04-09 2773
序 【yolov4-tiny】一、darknet-＞caffe 【yolov4-tiny】二、pytorch-＞onnx-＞caffe 前文使用两种途径将yolov4-tiny转为caffe，此后只需根据海思的HiSVP开发指南.pdf操作将caffe转为nnie，本文记录几点注意事项： 1、输入预处理 nnie_mapper 配置选项中配置了输入图片归一化的话，不需要在模型代码中自己再写一遍归一化。 nnie模型的默认输入为BGR格式，nnie_mapper 配置选项中配置了 RGB 的话模型会自己进行一
NNIE与Caffe学习
guolele2010的专栏
08-10 893
NNIE是海思的一个AI加速硬件，他是硬件实现了caffe的一些层 NNIE是Neural Network Inference Engine的简称，是海思媒体SoC中专门针对神经网 络特别是深度学习卷积神经网络进行加速处理的硬件单元，支持现有大部分的公开网 络，如Alexnet、VGG16、Googlenet、Resnet18、Resnet50等分类网络，Faster R- CNN、YOLO、SSD、RFCN等检测网络，以及SegNet、FCN等场景分割网络。实质他是将Caffe网络定义的几个层
基于海思NNIE引擎实现JPEG图片识别应用
06-19
本课程一共分为三个部分，如下所示。 一、课程内容、特色、目标以及答疑 ...三、基于NNIE构建一个jpeg图片识别的完整应用1）模型量化选项详解2）直接对jpeg图片进行目标检测，附上源代码并详细讲解。
基于海思NNIE引擎实现sensor视频识别应用
06-19
三、基于NNIE实现摄像头视频识别的完整应用1）模型量化选项详解2）直接对摄像头输出的视频数据流进行yolov3识别，附上源代码并详细讲解。 四、如何将本课程代码merge到SDK中1）如何将本课程代码merge到SDK中
face_recognition_nnie_海思CV500nnie人脸识别_
10-02
5. 测试数据：用于验证模型性能和系统功能的测试图片或视频。 综合上述，海思CV500nnie人脸识别技术结合了高性能的硬件加速和深度学习算法，提供了一套完整的商业级解决方案，适用于需要大量人脸识别的场景。开发者...
海思开发：Nanodet ： onnx -＞ caffe -＞ nnie
tangshopping的博客
03-02 3244
一、前言 应网友所托，帮忙转换 nanodet 模型（注：原版 nanodet 上采样是线性插值法，海思中不支持，换成反卷积了），花了一天多时间思考与尝试，终于搞定它，过程如下。 二、主要过程 仔细想了下，其实 nanodet 并没有什么生僻的 op，全部是很普通的、常见的那种，但是它们的组合方式以及数据的shape太令人难受了，下面我截图展示一下。 1. split 不支持 这里说一下，onnx 的 split 在 caffe 里面是 slice，slice 相关博客。相关代码如下： # onnx2ca
LinkSVP例子之七：机器视觉基础演示，利用NNIE性能进行行人检测
weixin_45326556的博客
11-08 923
该示例程序演示了在3519A、3559A平台上如何利用NNIE性能进行行人检测
海思图像画质_如何在不损失画质的情况下调整图像大小并放大图像
cumohuo9136的博客
09-07 1562
海思图像画质Have you ever tried resizing a image to make it larger? This usually results in loss of quality where the enlarged image looks blurry and unprofessional. Recently one of our users asked us if it...
海思AI芯片(Hi3519A/3559A)方案学习（十四）JPEG图片转换成bgr文件
jacke121的专栏
06-29 3766
原文：https://blog.csdn.net/avideointerfaces/article/details/89931156 前言 在系列文章海思AI芯片(Hi3519A/3559A)方案学习（十一）分析bgr文件格式 中有详细介绍bgr文件分量排列格式是bbbb...gggg....rrrr.... 但当时只提供代码来将bgr文件转换成Mat格式。本文来具体讲述其逆过程，即如何一张jp...
华为海思 AI 芯片 (Hi3559A V100) 算法开发（六） 基于 caffe 人脸识别项目 Python 实现
随意聊点
06-02 4936
前面我们搭建好了相关环境和最麻烦的 caffe 环境，接下来我们用 python 训练出来基于 caffe 的人脸识别 caffemodel。成功后我们再将它转化为海思开发板可以使用的 wk 文件。 这里我们先整理下我们的思路，首先 caffemodel 文件可以转化为海思可以读取的 wk 文件，但只是读取 caffemodel 文件中的网络参数，所以我们最好使用 YOLOv3 来进行人脸识别，方便后续的算法修改。我设定的流程为先用 PC 端的 python 进行人脸识别的开发，在PC 端实现完整的人..
海思Hi3519A SVP从入门到精通（二 NNIE开发指南）
热门推荐
Enjoy Coding
12-27 4万+
1. NNIE介绍 NNIE 是 Neural Network Inference Engine 的简称,是海思媒体 SoC 中专门针对神经网络特别是深度学习卷积神经网络进行加速处理的硬件单元,支持现有大部分的公开网络,如 Alexnet、VGG16、Googlenet、Resnet18、Resnet50 等分类网络,Faster R- CNN、YOLO、SSD、RFCN 等检测网络,以及 Se...
《基于海思NNIE引擎实现JPEG图片识别应用》视频课程介绍
ltshan139的专栏
04-02 1247
前言 以前讲的算法模型课程里面都是以bgr数据格式为输入进行讲解的。但实际应用中，往往为拍摄到的jpeg图片。从jpeg图片转换成nnie可以推理的数据格式，这中间还是有些开发工作量的。 本期新的课程《基于海思NNIE引擎实现JPEG图片识别应用》（链接：https://edu.csdn.net/course/detail/28362）就是来实现这一完整的应用。和一般做法不一样，本...
YOLO系列（v1~v3）的学习及YOLO-Fastest在海思平台的部署（中）
Turix附属空间[已停用]
06-21 3607
YOLO系列（v1~v3）的学习及YOLO-Fastest在海思平台的部署（上） YOLO系列（v1~v3）的学习及YOLO-Fastest在海思平台的部署（中） YOLO系列（v1~v3）的学习及YOLO-Fastest在海思平台的部署（下） 文章目录声明2 工程应用分析2.1 平台/软件介绍和环境搭建2.2 网络训练方式选择2.3 SVP-NNIE前向计算处理过程2.3.1 例程中对YOLOv3网络模型的初始化操作2.3.2 图像的输入2.3.3 NNIE输出数据的内存分布图2.3.4 网络的后级处理2
评论 8
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值