UAV-Human: A Large Benchmark for Human Behavior Understanding with Unmanned Aerial Vehicles
AVHuman 数据集,对无人机图像的人类行为进行理解解析,包含 67,428 个多模式视频序列和 119 个用于动作识别的目标,22,476 帧用于姿势估计,41,290 帧和 1,144个用于人员重识别的身份,以及 22,263 帧用于属性识别。它由一架飞行的无人机在三个月内的白天和夜晚在多个城市和农村地区收集的,因此涵盖了广泛的多样性,包括对象、背景、光照、天气、遮挡、相机运动和无人机飞行姿态。这样一个全面的、具有挑战性的基准将能够促进基于无人机的人类行为理解研究,包括动作识别、姿势估计、重识别和属性识别。
此外,该文还提出一种基于鱼眼的动作识别方法,该方法通过学习校正的 RGB 视频所引导的无界变换来减轻鱼眼视频的失真。实验结果也证明了该的方法在UAV-Human 数据集上的有效性。
作者 | Tianjiao Li, Jun Liu, Wei Zhang, Yun Ni, Wenqian Wang, Zhiheng Li
单位 | 新加坡科技设计大学;山东大学
论文 | https://arxiv.org/abs/2104.00946
代码 | https://github.com/SUTDCV/UAV-Human