- 博客(31)
- 资源 (3)
- 收藏
- 关注
RSS订阅原创 知识蒸馏 （一） 综述
综述《Knowledge Distillation: A Survey》2021 《Knowledge Distillation: A Survey》 - 知乎《Knowledge Distillation and Student-Teacher Learning for Visual Intelligence: A Review and New》[论文翻译]Knowledge Distillation and Student-Teacher Learning for Visual Intellig
2022-04-15 17:54:42
2046
原创 Age Estimation
将KCF打包成JNI类https://blog.csdn.net/burning_keyboard/article/details/78817657Android studio 中基于c++的OpenCV 配置https://blog.csdn.net/qq_42881467/article/details/107567570使用An...
2022-03-24 22:05:15
680
原创 3D Hand Reconstruction(一) 数据
数据：虚拟数据：3D Hand Shape and Pose Estimation from a Single RGB Image3D joint location数据：1、《Learning to Estimate 3D Hand Pose from Single RGB Images》Rendered Handpose Dataset（RHD）It contains 41258 training and 2728 testing samples. Each sample p.
2022-02-08 18:33:46
1078
原创 3D人脸重建 (四) 实践
Registration:Registration establishes this correspondence for all points of the face.Use a modified version of the Optimal Step Nonrigid ICP Algorithm, which applied in the 3D domain on triangulated meshes.https://github.com/charlienash/nricp计算机视..
2021-12-23 15:41:33
2123
原创 openface(四) GetPose
cv::Vec6f LandmarkDetector::GetPose(const CLNF& clnf_model, float fx, float fy, float cx, float cy){ //params_global:描述人脸缩放旋转和平移的刚性形状参数(scale,rotx,roty,rotz,tx,ty) if (!clnf_model.detected_landmarks.empty() && clnf_model.params_global[0] !=.
2021-09-07 15:37:08
549
2
原创 模糊（二）DeblurGAN
论文主要贡献：1）提出基于cGAN的网络DeblurGAN 和content loss2) 提出一个合成模糊图像的方法损失函数Adversarial lossWGAN-GP：实现了在多种GAN结构上稳定训练，且几乎不需要调整超参数。Content loss内容损失，也就是评估生成的清晰图像和ground truth之间的差距。两个常用的选择是L1（也称为MAE，mean absolute error）损失，和L2（也称为MSE）损失。最近提出了“percep...
2021-08-26 18:09:30
800
原创 模糊 （一）运动模糊&失焦模糊 去卷积&盲去卷积
（一）运动模糊：生成方法：1）时间反失真高帧率多帧积累渲染的到低帧频。2）设定角度距离，对目标进行叠加（二）失焦模糊：（三）其他：双边滤波：保边去噪Non-Local Means（非局部均值）滤波器运动滤波 https://zhuanlan.zhihu.com/p/56335422 解决时间轴抖动视频动作放大 https://zhuanlan.zhihu.com/p/56426748https://zhuanlan.zhihu.com/p/58103189https://zhuan
2021-07-28 09:51:35
4478
原创 Openface (三) EYE GAZE 数据集
三维视线估计1、Eyediap 数据集 ：利用深度摄像头标注 RGB 视频中的眼睛中心点位置和乒乓球位置。把这两个位置映射到深度摄像头记录的三维点云中，从而得到对应的三维位置坐标。这两个三维位置坐标相减后即得到视线方向。https://www.idiap.ch/en/dataset/eyediaphead_pose.txt ：逐帧头部姿势参数。eye_tracking.txt ：逐帧 2D 和 3D 眼睛位置。ball_tracking.txt ：球目标的逐帧 2D 和 3D 位置。screen
2021-07-20 18:39:26
3560
4
原创 Openface (二) EYE GAZE 算法综述
(一)三维视线估计4.1 目标从眼睛图片或人脸图片中推导出人的视线方向，通常用pitch（垂直方向）和 yaw（水平方向）表示。需要注意的是，在相机坐标系下，视线的方向不仅取决于眼睛的状态（眼珠位置，眼睛开合程度等），还取决于头部姿态（虽然眼睛相对头部是斜视，但在相机坐标系下，他看的是正前方）。4.2 评价指标在模型估计出 pitch 角和 yaw 角之后，可以计算出代表视线方向的三维向量，该向量与真实的方向向量（ground truth）之间的夹角即是 gaze 领域最常用的评价指标。4.3
2021-07-16 11:37:48
5255
原创 Openface (一)论文
OpenFace: an open source facial behavior analysis toolkit1、Facial landmark detection and tracking：Conditional Local Neural Fields (CLNF) ，a general deformable shape registration approach[Constrained local neural fields for robust facial landmark detectio
2021-07-15 19:00:15
1167
原创 openvino(一) Windows10安装和tensorflow模型转换
https://docs.openvinotoolkit.org/latest/openvino_docs_install_guides_installing_openvino_windows.html
2021-06-08 17:02:54
355
原创 Android (一)LInux 编译 OpenCV+OpenCV_contirb4.5.0 for Android
opencv document :https://docs.opencv.org/master/index.htmltracking 不在modules中 而在 extra modules 中 ,因此直接下载的opencv_android_sdk\sdk\java\src\org\opencv\中 没有tracking ，无法 import org.opencv.tracking;https://docs.opencv.org/4.5.0/javadoc/org/openc...
2021-05-12 18:39:27
247
原创 疲劳检测 （四） 基于landmark的姿态检测
数据集：Closed Eyes in the Wild (CEW)数据 眨眼数据http://parnec.nuaa.edu.cn/_upload/tpl/02/db/731/template731/pages/xtan/ClosedEyeDatabases.html YAWDD 打哈欠数据集 https://ieee-dataport.org/open-access/yawdd-yawning-detection-dataset#files1、利用关键点检测h...
2021-02-24 19:28:05
904
原创 疲劳检测 （三） 视频分类/行为识别
数据集：HMDB51 包含51类动作，每个动作至少包含51个视频，分辨率320*240。1) 一般面部动作微笑，大笑，咀嚼，交谈。2) 面部操作与对象操作：吸烟，吃，喝。http://serre-lab.clps.brown.edu/resource/hmdb-a-large-human-motion-database/#DownloadsKineticshttps://deepmind.com/research/open-source/open-source-datasets/ki
2021-01-15 17:53:07
882
1
原创 疲劳检测 （二） 表情识别综述 Facial Expression Recognition
https://blog.csdn.net/marleylee/category_7885668.html
2021-01-13 15:57:22
1203
原创 疲劳检测（一）Landmark + HeadPose
数据集1）Drazy 数据集：红外，包含多种用于疲劳检测的数据，14*3*10minhttp://www.drozy.ulg.ac.be/2）NTHU 驾驶员疲劳检测数据集http://cv.cs.nthu.edu.tw/php/callforpaper/datasets/DDD/3）Closed Eyes in the Wild (CEW)数据http://parnec.nuaa.edu.cn/xtan/data/ClosedEyeDatabases.html //失效4）Z.
2021-01-13 11:32:43
8322
5
原创 目标跟踪 （六）人脸跟踪
Learning spatial-temporal deformable networks for unconstrainedfacealignment andtrackingin videosSiamese Local and Global Networks for RobustFaceTrackingFacedetection andtrackingusing hybrid margin-based ROI techniques
2021-01-13 10:47:52
446
原创 单目标跟踪 （二） Siamese network 综述
Siamese network: 连接两个输入并产生一个输出。目的是确定输入到网络的两个图像补丁中是否存在相同的物体。网络测量两个输入之间的相似度，并具有共同学习相似度和特征的能力。Siamese+CF:SiamFC 《Fully-convolutional siamese networks for object tracking ECCV, 2016》GPU 速度，3 尺度 86fps，5 尺度 58fpsSiameseRPN CVPR 2018 160fps18年...
2020-12-23 16:25:36
1292
原创 image caption （四）Transformer
《attention is all your need》结构：Encoder：(可并行)1）输入：单词 Embedding位置 Embedding（因为 Transformer 不采用 RNN 的结构，而是使用全局信息，不能利用单词的顺序信息）2）结构：Encoder=6*layerlayer = multi-head self-attention (+residual connection + normalisation) {self-attention中取...
2020-12-02 18:39:36
3842
原创 单目标跟踪 （三） 小结
特征：如果目标快速变形，基于HOG的梯度模板就跟不上了，如果快速变色，基于CN的颜色模板就跟不上了。置信度指标:高置信度更新：只有在跟踪置信度比较高的时候才更新跟踪模型，避免目标模型被污染，减少模型漂移与更新次数，同时提升速度。1）最大响应值：最大响应分数Fmax。2）平均峰值相关能量(average peak-to correlation energy,APCE)：反应响应图的波动程度和检测目标的置信水平：（遮挡时波动剧烈）3）峰值旁瓣比(Peak to Sidel..
2020-11-27 14:38:17
5456
原创 单目标跟踪 （一）相关滤波器 方法综述
An In-Depth Analysis of Visual Tracking with Siamese Neural Networkshttps://github.com/czla/siamese-tracker-road-trip
2020-11-27 14:37:23
3125
原创 单目标跟踪 （四） 评价指标
生成类(generative)方法有相似性度量函数，判别类(discriminative)方法有机器学习方法的分类概率。有两种指标可以反映相关滤波类方法的跟踪置信度：1）最大响应值，2）响应模式，3）综合反映这两点的指标。LMCF《Large Margin Object Tracking with Circulant Feature Maps， CVPR2017》高置信度更新，只有在跟踪置信度比较高的时候才更新跟踪模型，避免目标模型被污染，同时提升速度。1）最大响应分数Fmax就是最大响应.
2020-11-27 14:36:52
3817
5
原创 目标跟踪 （七）MOT SORT DEEPSORT 卡尔曼滤波 匈牙利算法
https://zhuanlan.zhihu.com/p/90835266Tracking-by-Detecton基于目标检测的结果来进行目标跟踪：匈牙利算法（KM算法）：将前一帧中的跟踪框tracks与当前帧中的检测框detections进行关联，通过外观信息、马氏距离、或者IOU来计算代价矩阵 卡尔曼滤波：基于传感器的测量值（在目标跟踪中即目标检测器）与跟踪器的预测值，实现更精确的估计。（结合预测（先验分布）和测量更新（似然）的状态估计算法） DeepSORT处理流程：检测器生..
2020-11-27 14:36:34
5530
原创 单目标跟踪 （五）cv2.Tracker
from imutils.video import VideoStreamfrom imutils.video import FPSimport argparseimport imutilsimport timeimport cv2ap = argparse.ArgumentParser()ap.add_argument("-v", "--video", type=str, help="path to input video file")ap.add_ar.
2020-11-27 14:36:20
2665
2
原创 image caption （三）强化学习之Self-critical
《Self-critical Sequence Training（SCST） for Image Captioning》RL：训练模型，输入state即图片及已经生成的单词，输出action即下一个单词，使得模型得到更高的reward（metric）。https://zhuanlan.zhihu.com/p/24879932Policy Gradient是RL的一个比较基本的算法，适用于每个action可以从一个分布得到的情况。https://zhuanlan.zhihu.com/p/2.
2020-11-27 14:30:14
2022
1
原创 image caption（二）代码
Image caption generation:https://github.com/eladhoffer/captionGenSimple encoder-decoder image captioning:https://github.com/udacity/CVND---Image-Captioning-Project(Paper)StyleNet: Generating Attractive Visual Captions with Styles:https:...
2020-11-27 11:12:54
1651
3
原创 Image Caption（一）综述
1、监督学习 vs others：Exposure Bias（RNN造成的累积误差）解决方法：1）使用scheduled-sampling，在训练阶段使用的输入以p的概率选择真实样本，以1-p的概率选择上一个词的输出。p随着训练次数的增加衰减（指数函数、反sigmoid函数、线性函数）。Word-Level Oracle Word《Scheduled sampling for sequence prediction with recurrent neural networks》Google 20
2020-11-27 10:11:03
2809
openface_x64_release.zip
2021-07-16
opencvaddopencvcontrib450-cmake.zip
2021-07-14
opencv+opencvcontrib_release+debug_450_aar.zip
2021-07-14
空空如也
TA创建的收藏夹 TA关注的收藏夹
TA关注的人