2018年06月_兢兢业业小码农

原创 opencv3与opencv2代码区别总结

总是在caffe编译时遇到opencv的版本问题，继续总结记录一波。基本上都是opencv3与opencv2版本差距问题。本人常常遇到的是：cvtColor函数中颜色转换系的宏，全替换为”COLOR_”前缀，如CV_BGR2HSV改为COLOR_BGR2HSV在caffe有时还要在前加cv::，不然还是找不到。caffe2 报错：caffe2/image/image_input_op.h:521:...

2018-06-22 12:39:40 9410 1

原创 pytorch多进程加速及代码优化

目标：优化代码，利用多进程，进行近实时预处理、网络预测及后处理：本人尝试了pytorch的multiprocessing，进行多进程同步处理以上任务。from torch.multiprocessing import Pool,Manager为了进行各进程间的通信，使用Queue，作为数据传输载体。 manager = Manager() input_queue = manager.Q...

2018-06-20 16:26:22 16810 10

转载 python代码性能优化

1.可视化代码运行时间工具vprof：https://github.com/nvdv/vprof安装：sudo pip3 install vprof然后直接用它运行代码：vprof -c h test.pyh会让它根据每行代码的运行时间附上热图。需要带输入时：vprof -c cmh "testscript.py --foo --bar"2.用上下文管理器测量部分代码运行时间：from time ...

2018-06-15 17:31:03 1813

原创 Segmentation fault (core dumped)

Segmentation fault (core dumped)这个bug调的我有点懵。因为是pytorch训练时，跑着跑着突然停了，然后用的ecllipse也没有任何报错信息，就开始查网页，说是Dataloader、Dataparallel的事，就把他们都换了，结果还是出问题。就用gdb找：gdb python3r train.py这时出现了这个报错：Segmentation fault (co...

2018-06-14 19:22:15 12185

转载 pytorch 减小显存消耗，优化显存使用，避免out of memory

本文是整理了大神的两篇博客：如何计算模型以及中间变量的显存占用大小：https://oldpan.me/archives/how-to-calculate-gpu-memory如何在Pytorch中精细化利用显存：https://oldpan.me/archives/how-to-use-memory-pytorch还有知乎中大神的解答：https://zhuanlan.zhihu.com/p/3...

2018-06-14 11:08:02 108507 5

转载 Debug:intel realsense sdk2.0 Ubuntu18.04 modprobe: could not insert 'videodev': Exec format error

在Ubuntu18.04上安装intel realsense sdk2.0，运行系统补丁文件./scripts/patch-realsense-ubuntu-lts.sh，会有如下报错modprobe: could not insert 'videodev': Exec format error 多谢大佬们的讨论：https://github.com/IntelRealSense/libreals...

2018-06-04 10:12:19 3119

小小码农的博客