收藏实战｜OpenCV实时弯道检测(详细步骤+源码)

最新推荐文章于 2024-07-05 10:31:47 发布

lykffl

最新推荐文章于 2024-07-05 10:31:47 发布

阅读量3k

点赞数 9

分类专栏：视觉识别文章标签：计算机视觉 opencv python

原文链接：https://mp.weixin.qq.com/s/GhSHof6LHgjs3_6QJCF27Q?

版权

视觉识别专栏收录该内容

26 篇文章 6 订阅

订阅专栏

导读

本文主要介绍如何使用 Python 和 OpenCV实现一个实时曲线道路检测系统。（公众号：OpenCV与AI深度学习）

背景介绍

在任何驾驶场景中，车道线都是指示交通流量和车辆应行驶位置的重要组成部分。这也是开发自动驾驶汽车的一个很好的起点！在我之前的车道检测项目的基础上，我实现了一个曲线车道检测系统，该系统工作得更好，并且对具有挑战性的环境更加稳健。车道检测系统是使用 OpenCV 库用 Python 编写的。

下面是实现步骤：

畸变校正
透视变换
Sobel滤波
直方图峰值检测
滑动窗口搜索
曲线拟合
覆盖检测车道
应用于视频

畸变矫正

相机镜头扭曲入射光以将其聚焦在相机传感器上。尽管这对于我们捕捉环境图像非常有用，但它们最终往往会稍微不准确地扭曲光线。这可能导致计算机视觉应用中的测量不准确。然而，我们可以很容易地纠正这种失真。

我们可以使用棋盘格来标定相机然后做畸变校正：

测试视频中使用的相机用于拍摄棋盘格的 20 张照片，用于生成畸变模型。我们首先将图像转换为灰度，然后应用cv2.findChessboardCorners()函数。我们已经知道这个棋盘是一个只有直线的二维对象，所以我们可以对检测到的角应用一些变换来正确对齐它们。用 cv2.CalibrateCamera() 来获取畸变系数和相机矩阵。相机已校准！

然后，您可以使用它cv2.undistort()来矫正其余的输入数据。您可以在下面看到棋盘的原始图像和校正后的图像之间的差异：

实现代码：

def undistort_img():    # Prepare object points 0,0,0 ... 8,5,0    obj_pts = np.zeros((6*9,3), np.float32)    obj_pts[:,:2] = np.mgrid[0:9, 0:6].T.reshape(-1,2)    # Stores all object points & img points from all images    objpoints = []    imgpoints = []    # Get directory for all calibration images    images = glob.glob('camera_cal/*.jpg')    for indx, fname in enumerate(images):        img = cv2.imread(fname)        gray = cv2.cvtColor(img, cv2.COLOR_BGR2GRAY)        ret, corners = cv2.findChessboardCorners(gray, (9,6), None)        if ret == True:            objpoints.append(obj_pts)            imgpoints.append(corners)    # Test undistortion on img    img_size = (img.shape[1], img.shape[0])    # Calibrate camera    ret, mtx, dist, rvecs, tvecs = cv2.calibrateCamera(objpoints, imgpoints, img_size, None,None)    dst = cv2.undistort(img, mtx, dist, None, mtx)    # Save camera calibration for later use    dist_pickle = {}    dist_pickle['mtx'] = mtx    dist_pickle['dist'] = dist    pickle.dump( dist_pickle, open('camera_cal/cal_pickle.p', 'wb') )def undistort(img, cal_dir='camera_cal/cal_pickle.p'):    #cv2.imwrite('camera_cal/test_cal.jpg', dst)    with open(cal_dir, mode='rb') as f:        file = pickle.load(f)    mtx = file['mtx']    dist = file['dist']    dst = cv2.undistort(img, mtx, dist, None, mtx)    return dstundistort_img()img = cv2.imread('camera_cal/calibration1.jpg')dst = undistort(img) # Undistorted image

这是应用于道路图像的失真校正。您可能无法注意到细微的差异，但它会对图像处理产生巨大影响。

透视变换

在相机空间中检测弯曲车道并不是很容易。如果我们想鸟瞰车道怎么办？这可以通过对图像应用透视变换来完成。这是它的样子：

注意到什么了吗？通过假设车道位于平坦的 2D 表面上，我们可以拟合一个多项式，该多项式可以准确地表示车道空间中的车道！这不是很酷吗？

您可以使用cv2.getPerspectiveTransform()函数将这些变换应用于任何图像，以获取变换矩阵，并将cv2.warpPerspective()其应用于图像。下面是代码：

def perspective_warp(img,                     dst_size=(1280,720),                     src=np.float32([(0.43,0.65),(0.58,0.65),(0.1,1),(1,1)]),                     dst=np.float32([(0,0), (1, 0), (0,1), (1,1)])):    img_size = np.float32([(img.shape[1],img.shape[0])])    src = src* img_size    # For destination points, I'm arbitrarily choosing some points to be    # a nice fit for displaying our warped result    # again, not exact, but close enough for our purposes    dst = dst * np.float32(dst_size)    # Given src and dst points, calculate the perspective transform matrix    M = cv2.getPerspectiveTransform(src, dst)    # Warp the image using OpenCV warpPerspective()    warped = cv2.warpPerspective(img, M, dst_size)    return warped