Event camera事件相机

YouTobe视频1
YouTobe视频2
YouTobe视频3
B站1
B站2

Dynamic Vision Sensor(DVS)

bio-inspired 仿生传感器(视网膜)
一个实验:人的眼睛只能看到动的东西,不能看不到相对静止的物体,实际上人的眼睛不是绝对静止的有微小的移动。当把人的眼睛的运动反馈到一台相机上,人眼与相机相对静止时是不能看到物体的。
no images不产生任何的image,没有frame,帧的概念
smart pixels:independent and asynchronous
output:sequence of a events(local brightness changes,输出异步事件流
Only events transmitting local pixel-level changes
记录变化,如果像素点发生变化记录一个event,相机常量参数c(12%),每当亮度变化超过原来的c时记录事件

DVS is actually not a “camera” by definition.
在这里插入图片描述
上图中polarity可以是1可以是-1,用来表示该像素是变亮还是变暗,把事件分为on和off两种。图中经常用两种颜色区分。
不转的时候不能看到任何图像。
当转速较慢时:
在这里插入图片描述
转速较快时:
在这里插入图片描述

其实也就这么大一个sensor在这里插入图片描述
行人运动:
在这里插入图片描述
在这里插入图片描述
当手拿着它围绕一个静态场景来回动的时候就可以获得周围的轮廓形状,可用于3D模型重建
在这里插入图片描述

DAVIS(The Dynamic and Active-pixel Vision Sensor)

combines the functionality of a Dynamic Vision Sensor with a frame-based intensity read-out
其实就是结合了dvs和普通的相机,dvs+aps(active pixel sensor)
在这里插入图片描述
好处以及对比
在这里插入图片描述
在这里插入图片描述
当传统相机对准黑色太阳镜时,往往只能照出黑色,但是
在这里插入图片描述
传统相机拍照的时候同框可容纳的亮度范围有限,再从室内进入室外时会突然一亮,进入室内则会突然一黑,dvs则有high dynamic range,可以看清很亮和较暗的东西。

用于跟踪和检测,其实一些静止的点我们在检测或跟踪的时候也用不到
在这里插入图片描述
在这里插入图片描述
在这里插入图片描述

综述论文Event-based Vision: A Survey

https://zhuanlan.zhihu.com/p/80682334
https://zhuanlan.zhihu.com/p/59170927

关于事件相机学习的一份资源

https://github.com/uzh-rpg/event-based_vision_resources

评论 2
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值