Rust实现网络摄像头上应用AI（人脸识别、80种目标检测）

宋蓝诚

已于 2024-05-08 10:13:55 修改

阅读量1.1k

点赞数 3

分类专栏：嵌入式开发 AI应用文章标签：人工智能 rust 嵌入式硬件深度学习

于 2024-05-08 09:55:44 首次发布

本文链接：https://blog.csdn.net/armer_song/article/details/138558227

版权

缘起

嵌入式开发对开发人员要求比较高，哪怕是老手。其中包括内存管理和多线程等问题
比较大的规模，单一的大工程对团队协作不方便
固件定制多，单一大工程在版本上比较难维护
很多领域，对于AI的落地有需求

想法

用rust 做一个通用摄像头的应用层，解决或改善上述问题。

遇到的问题

rust编译出的二进制文件比较大
sdk基本是c/c++编写，需要考虑rust与c/c++交互

实际上，rust经过优化(lto等优化)后编译出来的文件比gcc工具链编译的要小些，试过的人可以看到这个惊喜.

实现

AI：人脸检测、识别；物体检测
编码和osd配置保存读取
osd(主码流显示,子码流因为显示AI的画框,代码已经注释掉)
rtsp(基于rockchip库)
消息服务
rv1106g 平台实现

可能的微末价值:

rust 在嵌入式方面的应用参考
rust 与c交互
最小化二进制大小
ip camera 大致架子及媒体层抽象
ai 在rockchip rknn上的应用展示

效果

详见：

最低0.47元/天解锁文章

确定要放弃本次机会？

福利倒计时

: :

立减 ¥

普通VIP年卡可用

立即使用

宋蓝诚

关注关注

3
点赞
踩
4

收藏

觉得还不错? 一键收藏
1
评论
分享

复制链接

分享到 QQ

分享到新浪微博

扫一扫
举报

举报

专栏目录

Rust与Tauri 2.0：打造生物识别应用的新利器

远程部署调试运行安装项目调试二次开发项目技术新持续迭代部分源码免费分享

03-20

756

Rust 是一种由 Mozilla 开发的系统编程语言，它的设计目标是提供内存安全、高性能和并发性。Rust 的内存安全特性是通过所有权系统和借用检查器来实现的。在 Rust 中，每个值都有一个唯一的所有者，当所有者离开作用域时，值会被自动释放，这有效地避免了内存泄漏和空指针引用等问题。同时，Rust 的借用检查器会在编译时检查代码，确保引用的有效性，防止悬垂指针和数据竞争等错误。Rust 的高性能得益于其零成本抽象和高效的编译优化。

【Rust日报】2022-01-17 使用 Opencv 和 Rust 进行面部和眼部识别

Rust语言学习交流

01-17

3029

使用 Opencv 和 Rust 进行面部和眼部识别这是一个教学视频, 使用 Opencv 和 Rust 进行面部和眼部识别.需要自己科学上网, 关注相关方面的小伙伴可以看看.油管视频：h...

1 条评论您还未登录，请先登录后发表或查看评论

rustface：用于Rust编程语言的人脸检测库

02-03

rustface：用于Rust编程语言的人脸检测库

文本转语音-音画适时推送rtsp并播放

最新发布

wjcroom的专栏

03-10

644

而今天的这个相似功能的代码是mac os，理论支持windows，和linux，依赖ffmpeg和xiu（一个rust流服务器）的rtsp服务。音画同步应该是另个问题了，几天前，鼓捣了一下图片。让编辑后的，马上在视频中显示。做的这些就为了，让报号和点单，有个界面。这两天在弄这个，前2篇是通过虚拟声卡，达到了最简单的一个逻辑，播放文本就从声卡发声，不播无所谓，自动忙音。那个工作在windows平台，对于刚接触的，最好是慢慢和AI调试着来，一些功能就做出来。合并的代码，就当成剩下的作业，有空再来做。

Rust 编程语言的人脸检测库

06-28

锈面用于 Rust 编程语言的 SeetaFace 检测库演示程序输出示例 SEETAFACE C++ – 原始库的 Github 存储库PYTHON BINDINGS – 从 Python 代码调用 RustfaceLICENSE – 根据许可的 BSD 2-Clause 获得许可关于SeetaFace Detection 是漏斗结构级联的一种实现，专为实时多视图人脸检测而设计。FuSt 旨在通过使用从粗到细的结构在精度和速度之间取得良好的平衡。它由早期阶段的多个特定于视图的快速 LAB 级联分类器组成，随后是后期的粗多层感知器 (MLP) 级联。最后一个阶段是一个统一的精细 MLP 级联，以集中方式处理所有提议的窗口。阅读更多...表现您可以使用cargo bench运行标准基准测试。每晚使用 Rustnightly分支包含一个稍微（~20%）更快的 rustface 版本。这种加速是通过使用显式 SIMD 内在函数实现的。如果你想使用这个分支，你需要一个较旧的 nightly 工具链。rustup toolchain install nightly-2018-01-15 ru

探索高效人脸检测：Rustface

gitblog_00040的博客

05-24

550

探索高效人脸检测：Rustface 去发现同类优质开源项目:https://gitcode.com/ 项目简介 Rustface 是一个基于 Rust 编程语言的 SeetaFace 检测库移植版。它提供了实时多视角人脸检测功能，适用于那些寻求高性能和稳定性的开发者。灵感来源于 SeetaFace 的 C++ 实现，Rustface 在保留原有功能的同时，充分利用了 Rust 语言的安全特性和并发...

rustface-人脸检测库，基于C ++ SeetaFace引擎-Rust开发

05-27

用于Rust编程语言的Rustface SeetaFace检测库演示程序输出示例SEETAFACE C ++ –原始程序的Github存储库用于Rust编程语言的Rustface SeetaFace检测库示例程序的SEETAFACE C ++ –原始库示例的Github存储库PYTHON BINDINGS –调用Rustface源自Python代码LICENSE –在许可的BSD 2条款下获得许可。关于SeetaFace检测是漏斗结构级联的一种实现，旨在用于实时多视图面部检测。 FuSt的目标是在精度和速度之间进行权衡，方法是使用粗略的

webRTC 实现人脸识别

yinshipin007的博客

12-29

1398

首先我们需要先了解一下什么是webRTC 他能做什么 webRTC主要是帮我们处理多媒体应用，如音视频通话，屏幕共享都可以实现，主要基于浏览器API调用，其底层浏览器会调用native C++ 等一些库帮我们实现的，而我们在应用层掉API 即可。桌面程序我们选择 tauri 而不是 electron。

物联网云端一体人工智能方案的探索

HaaS技术社区的博客

05-18

2522

不看这几篇好文，就别说自己了解物联网 1、高速发展的人工智能 说到人工智能，大家并不陌生，无论是围棋大战中战胜顶尖段位人类围棋手的Alpha Go，还是弹跳自如的波士顿机器狗。而无数的科幻电影更是为人类展示了一个无比美好的未来，而在科幻电影中的场景，正逐渐融入到我们的日常生活中。当清晨从睡梦中被柔和的语音唤醒，叫醒你的可能是天猫精灵智能语音机器人，并且温馨地提醒你今天的天气情况与行程安排。离开家出门时，自动驾驶汽车自动驶出车库并载你去你的目的地，而你可以在车上继续休息或关注机器人...

物联网之IP Camera解决方案简介

HaaS技术社区的博客

05-20

8434

不看这几篇好文，就别说自己了解物联网前言 IP Camera即网络摄像头，是物联网领域中的一个重要场景。本文将带领读者了解IP Camera这一典型物联网场景的市场、IP Camera的重要组成部分、以及以HaaS IP Camera为代表介绍IP Camera的解决方案的主要内容。 IP Camera市场概述近些年来，随着AI技术、云服务以及IoT技术的发展，网络摄像机IP Camera迎来了高速发展期。除了工业级的工程使用场景的专业iPC之外，各行各业的智能IPC也正在...

人工智能与算法学习总结报告！（珍藏版）

weixin_40920183的博客

05-21

2395

今天，为大家整理了近半年公众号发布的文章，方便相关领域的读者查阅学习!PyTorch60分钟入门深度学习工具Pytorch想要入门最前沿的深度学习，那就用PyTorch版《动手学深度学习...

rust-facedetect:在Rust上使用OpenCV入门

05-08

锈面检测 rust-facedetect是使用的入门。运行时，它将抓住第一个可用的摄像机并显示来自其中的流，同时用矩形突出显示它可以检测到的任何面Kong。跑步 cargo run 使用Esc退出。执照麻省理工学院

一个简单易用的跨平台 Rust 网络摄像头捕获库

06-28

诺赫瓦Nokhwa(녹화)：韩语单词，意思是“记录”。一个简单易用的跨平台 Rust 网络摄像头捕获库使用 nokhwaNokhwa可以通过将其添加到您添加到您的箱子Cargo.toml ：[dependencies.nokhwa] // TODO: replace the "*" with the latest version of `nokhwa` version = "*" // TODO: add some features features = [""]很可能，您将只使用Camera结构提供的功能。如果您需要较低级别的访问权限，您可以选择使用在nokhwa::backends::capture::*找到的原始捕获后端。例子// set up the Cameraletmut camera= Camera::new (0 ,// indexSome (CameraFormat::new_from (640 ,480 , FrameFormat:: MJPEG,30 )),// format CaptureAPIBackend:: AUTO,// what ba

【OpenCV.js简介】功能概览：图像处理、特征检测、视频分析等API

[【OpenCV.js简介】功能概览：图像处理、特征检测、视频分析等API](https://cdn.educba.com/academy/wp-content/uploads/2021/05/OpenCV-imread-1.jpg) # 1. OpenCV.js的入门介绍 OpenCV.js是一个开源的计算机视觉...

Rust语言的人工智能

2501_90571230的博客

02-11

330

Rust是一种系统编程语言，旨在通过提供高性能和内存安全性来解决传统C/C++语言的一些缺陷。Rust的设计理念是“没有空指针，没有数据竞争”，这使得它成为编写大型软件和系统级程序的理想选择。内存安全：Rust的所有权系统能够在编译时捕捉到许多常见的内存错误，从而保证了内存的安全性。高性能：Rust的性能接近C/C++，同时提供了更高的安全性和易用性。并发性：Rust的并发模型使得多线程编程变得安全而高效，适合用在高度并发的环境中。跨平台支持：Rust支持多种平台，使得开发者可以轻松迁移和部署应用程序。

Rust Tauri & OpenCV 写一个桌面摄像头

王乐平技术博客

10-28

6640

在一些直播场景，或者屏幕录制场景，希望可以把自己的头像通过摄像头放在桌面显示，增加互动性。一些会议软件是支持这个能力的，但通常会把摄像头的内容放在一个方框里，显得不太好看，而且还得额外打开一个会议软件，会议软件的多余内容也会被录制进去。于是就用 Tauri 简单包装了下网页，实现了这个小功能。

基于 Rust 实现简单、快速、轻量级的 AI Agent 框架 Rig

渔夫.AI

12-20

1244

Rig（ARC）是一个基于 Rust 优势面向 LLM 工作流引擎的 AI 系统构建框架，目的是要解决更底层的性能优化问题。值得关注的一个框架。

go和rust调用大华摄像机SDK

weixin_47088197的博客

12-02

423

废话不多说，以下是使用go和rust调用dhnetsdk示例。

【ai_agent】从零写一个agent框架（四）用rust制作一个python的虚拟运行环境。

python1234_的博客

07-10

779

为了增加框架的扩展性和适用性，我们要能够在流程节点中运行python脚本。1 为什么是python？思考：老实说我并不喜欢python，我更倾向于lua这种短小轻快的脚本。在我之前写的规则引擎rush里，就用的lua脚本写规则。并且我对比过多个脚本的性能，lua可以甩python几条街。但是，python是大众的选择，被更多的人接受，没得选，只能是它。这里有屌大的就要说了，为啥不用js，不用wasm，它们用的人也很多。不管是从应用的角度看，还是从平台的角度讲，长远来看这哥俩也是要支持的。