树莓派编程基础与硬件控制

最新推荐文章于 2024-10-06 07:00:00 发布

vv不说话

最新推荐文章于 2024-10-06 07:00:00 发布

阅读量1.7k

点赞数 14

分类专栏：树莓派+python+opencv的计算机视觉文章标签：计算机视觉

本文链接：https://blog.csdn.net/hvbkbb/article/details/136095997

版权

树莓派+python+opencv的计算机视觉专栏收录该内容

7 篇文章 1 订阅

订阅专栏

1.编程语言

Python 是一种泛用型的编程语言，可以用于大量场景的程序开发中。根据基于谷歌搜

索指数的 PYPL（程序语言流行指数）统计，Python 是 2019 年 2 月全球范围内最为流行

的编程语言

相比传统的 C、Java 等编程语言，Python 具备一些优势。

（1）较强的易读性。Python 是一种高级编程语言，其在设计上更为接近人类使用的

自然语言（英语）。具备英语基础和少许编程基础的人可以很轻松地阅读 Python 代码。

（2）简洁的语法（规则）。Python 语言的设计哲学是“优雅”“明确”和“简单”，

力图用最简洁的方式完成程序内容。相比于传统编程语言，Python 通常可以用更短的语句

执行同样的功能。

（3）强大的可扩展性。由于 Python 是一个完全开放的编程语言环境，其拥有大量强

大的扩展包，例如数学计算包 NumPy、游戏开发包 pygame、机器学习包 TensorFlow 等。

正是因为这一特点，Python 目前是人工智能编程的首选语言。

（4）便利的可移植性。Python 几乎可以运行于任何操作系统，将 Python 代码移植

到 Windows、macOS、Linux 等不同环境中非常便利。

交互式编程是一种非常便利的 Python 编程方式，常用于程序测试的场景。首先通过任

务栏打开树莓派的“终端”，在其中输入“python3”并回车即可进入 Python 3 的交互式

编程环境

用 Geany 编辑器编写 Python 程序

虽然交互式编程环境可以很方便地输出语句的结果，但它并不能将大段的程序内容存

储起来反复运行，因此只适用于程序测试的场景。绝大多数情形下，我们需要将完整的

Python 程序存储为 .py 格式的文件，再调用它进行运行。

可以使用任意的文本编辑器编写 Python 程序。我们在后续的课程中统一使用树莓派系

统预装的轻量级文本编辑器 Geany 来编写 Python 程序。Geany 可在树莓派任务栏的开

始菜单中选择“编程”找到。

使用 Geany 编辑器的图标可以方便地进行文件的新建、打开、保存以及 Python 程序

的运行操作

打开 Geany 后，我们先新建一个空白文档，再单击文档→设置文件类型→脚本语

言→ Python 源文件，将其设为 Python 程序文件

2.树莓派的 GPIO 接口

树莓派 3B+ 主控板可以通过上面的 40 个引脚连接电子设备输入或输出电信号。

3. 点亮一盏小灯

导入 Python 扩展包

要使用 Python 程序对 GPIO 连接的输入 / 输出设备进行控制，需要用到一个名为

RPi.GPIO 的扩展包。在 Python 程序中，许多功能被写在了一些额外的官方或第三方扩展

包中，可以通过如下两种方式导入扩展包。
第一种方式为直接导入，后面的“as 自定义名称”可以不写。不写时，使用“扩展包

名 . 包内的函数或变量名”的形式可以调用包内预先设定好的函数或变量。若设定了自定义

名称，则使用“自定义名称 . 包内的函数或变量名”的形式调用。

第二种导入方式则可以选择性导入包中设定的函数或变量，导入多个函数或变量时需使

用逗号隔开。若使用“import *”则可导入包中的所有函数及变量。用这种方式导入扩展包时，

我们可以直接用导入的函数或变量名来调用它们而不用再写包名。

中除了 1~40 的编号外，每个 GPIO 引脚后面还有另一个编号。在 Python
程序中使用 GPIO 时，需要指定程序应该使用哪一种编号方式。其设定方法是：

树莓派的所有 GPIO 口既可以连接输入设备，也可以连接输出设备，因此需要事先设
定其为输入模式还是输出模式：
模式有两种：gpio.IN 代表这是一个输入设备，gpio.OUT 代表这是一个输出设备。

例如，对 LED 连接的 GPIO 接口进行设定的完整程序如下：设定 GPIO 接口输出高、低电平的语句为：

电平状态只有两种：gpio.HIGH 代表高电平，gpio.LOW 代表低电平。

为了让程序能控制小灯亮灭一段时间，需要引入 Python 中

time 扩展包的 sleep 函数。 sleep 后的参数表示需等待的时间，单位为秒。

4.用按钮控制灯的状态

与 LED 模块类似，我们也要先设定按钮连接的 GPIO 接口的输入 / 输出状态。我们可以通过一个简单的函数来读取接口的电平状态：
这个函数可能得到两个返回值：gpio.HIGH（高电平）或 gpio.LOW（低电平）。我

们可以通过判断按钮的电平状态来执行不同的操作。例如，在按钮被按下时将小灯点亮，否

则将小灯熄灭。
但是这个程序并不能真正实现预想的功能，因为这段程序仅仅在程序刚刚运行的一瞬间

进行按钮按压状态的读取与判断。若要实现持续判断的功能，需要增加一个 while 循环结构。

4.1两个按钮的控制与逻辑运算符

将这个逻辑转化为程序：

但这样编写的程序看上去有一点复杂。在需要同时判断多个条件的真假时，我们可以通

过逻辑运算符来处理它们的关系。

逻辑运算符有 and（与）、or（或）、not（非）三种。

与运算符 and：用 and 连接两个条件，当两个条件都为真时，返回真；有一个为假时，

返回假。等同于我们常说的“并且”。

或运算符 or：用 or连接两个条件，当两个条件有一个为真时，返回真；都为假时，返回假。

等同于我们常说的“或者”。

非运算符 not：在条件前加上 not，可以得到与条件真假相反的结果。等同于对条件加

上了“不”字。

上面程序的功能实质上是：按钮 1 被按下并且按钮 2 被按下时点亮小灯，否则熄灭小灯。

所以可以利用逻辑运算符编写以下程序。

4.2抢答器的完整示例程序

5.机器视觉与图像识别

人工智能系统的一个重要发展方向是对人类机能的模拟，因而学会“看”对人工智能而

言是非常关键的一步。

在分析机器如何“看”之前，我们先简单了解一下人类的视觉机制。我们天生就能使用

眼睛接收光线，从而可以看到五彩斑斓的世界，这是因为人眼的视觉细胞中存在分别对红色、

绿色、蓝色敏感的 3 种细胞，从而可以识别出这 3 种颜色，并可以通过它们的融合识别其

他颜色。

因此，红、绿、蓝 3 种颜色被称为视觉三原色，它们的任意组合可以构成可见光的所

有颜色。

人工智能视觉的关键就在于如何从图像中分析出各种物体的颜色、形状等基本信息，进

而分析它们所蕴含的意义。这个过程就被称为图像识别，或者机器视觉。

6.机器视觉技术的常见应用

1.相似图像搜索

2009—2010 年，谷歌、百度等搜索公司相继推出了以图搜图的图片搜索功能。这一

功能可以分析图片上的特征信息，并从互联网上找到与该图片相似的图片。现在，各类手机

购物 App 也可以以类似的原理实现拍摄商品照片，找到相似商品的功能。

2.文字识别

很多电子设备都可以使用 OCR（光学字符识别）技术识别纸质资料上的文字，目前较

为成熟的 OCR 技术可以以较高的成功率读取手写文字。

3.面部识别

当前的智能手机上大多搭载了利用手机摄像头结合人工智能算法实现的面部识别功能。

结合这一功能，智能手机可以以较高的安全性进行解锁、支付等操作。除此以外，面部识别还被广泛应用于公共安全领域，不单可以在特定场所保护公共安全，还可以帮助侦破刑事案件。

4.目标检测

人工智能图像识别的一个关键是识别图像中的物体并对它们进行分类。现在，随着人工

神经网络技术的发展，我们可以更轻松地使用一些开源的神经网络工具“训练”AI 识别物体。

图 5.8 所示为目标检测工具识别指定种类的物体。

7.认识 OpenCV

通过前面的学习，我们知道，计算机等电子设备中存储的图像信息实质上是以像素排列

的颜色值信息，也就是大量的数据。要从图像信息中得到有意义的信息，就必须对这些数据

进行分析与处理。

计算机科学家和相关领域的从业者在过往几十年时间内发展出了大量用于处理计算机图

像信息的数学方法。开源的计算机视觉库 OpenCV 内置了大量这类数学方法，可以帮助我

们分析图像信息。

7.1OpenCV 简介

英特尔公司于 1999 年发起了一个以计算机图像处理为主题的开源程序库项目OpenCV（开源计算机视觉库），它已成为目前影响力最大的一个开源计算机视觉库。OpenCV 在面部识别、手势识别、目标识别、增强现实（AR）等问题上都能发挥重要的作用。 2009 年，OpenCV 发布了其第一个第二代正式版本。自 2012 年起，一个专门的非营利组织负责 OpenCV 项目的后续支持。OpenCV 2015 年发布其第三代，2018 年发布到第四代。在我们后续的项目中，将使用目前应用最为广泛的 OpenCV 第三代版本。 OpenCV 本体以 C++ 程序语言编写，但也提供了包括 Python 在内的其他编程语言的扩展接口。

视频的帧与分辨率

OpenCV 不单可以用于处理静态的图像信息，其很重要的一个目标是对实时的动态图

像进行处理。

我们可以运用摄像头来捕获动态的视频图像。摄像头的基本成像原理与数码相机完全相

同，只不过它可以实时以较短的时间间隔连续获取图像信息。这些图像信息按时间顺序排列

起来就组成了我们常说的视频。

我们看到的视频实际上都是由若干张静态图片连续播放而成的。人类大

脑的视觉系统会将连续播放的相似图片自动连接成连贯的影像。

视频中每一张静态图片被称为视频的一帧（frame）。视频每秒输出的帧数量是一个很

重要的指标，这被称为帧率（单位为帧 / 秒）。现在主流的视频帧率是 30 帧 / 秒或 60 帧 / 秒。帧率越高，视频越流畅。
一个视频中每一帧图像的像素排列是完全一致的。视频中每帧图片的横轴、纵轴像素的

数量被称为视频的分辨率。以树莓派官方摄像头为例，该摄像头拍摄的图像横轴拥有 640

个像素，而纵轴拥有 480 个像素，所以其分辨率为 640 像素 ×480 像素。
橙色点所示，我们可以将每个像素定位到其在 x 轴（横轴）和 y 轴（纵轴）

方向的位置，并标注为 ( x 坐标， y 坐标 )。

视频的分辨率常以纵轴的像素数量来表示，例如标清视频为 480p，指的是纵轴有 480

个像素。而高清视频为 720p，全高清视频为 1080p，4K 视频则为 2160p。标准视频的横

纵像素比通常为 16 :9或4 :3。显然，分辨率越高，视频越清晰。

7.2opencv安装：

欲哭无泪555555555555555555，走了一天弯路，晕

结果在终端窗口输入sudo apt-get install -y libopencv-dev python3-opencv

sudo pip3 install numpy

输入python3验证

再import cv2没有报错就ok了

7.21用树莓派摄像头调取图像

使用 OpenCV 测试摄像头的完整程序如下。

运行程序后将在弹出的窗口中看到其拍摄到的实时画面。如果未能看到画面，请检查摄

像头的连接。

现在我们来分析一下这段程序代码的运作过程。OpenCV 可以使用 VideoCapture 读

取视频。其后的括号中填写序号“0”将可以读取树莓派的默认摄像头信号。如果连接了其

他摄像头，可以用其他序号来获取。此外，在这里填写视频存储地址，也可以直接读取树莓

派系统中存储的视频。

将读取视频的结果创建为 cap 后，使用 isOpened 函数可以返回其读取视频的结果。

如果读取成功，则返回 True（真），否则返回 False（假）。因此，我们可以将它作为

while 循环的条件实现循环读取视频信号。

对 cap 使用 read 函数将返回视频中一帧的信息，这个函数存在两个返回值：该帧是否

存在以及这一帧的具体信息。我们可以用形如 (ret, frame) = cap.read() 的格式将第一个返

回值存为 ret，第二个返回值存为 frame。

ret 在帧存在时为 True（真），否则为 False（假）。frame 则包含了这一帧中所有像

素点的三原色值信息及其排列方式。OpenCV 读取的帧信息的每一个像素由三原色值按照

B（蓝）、G（绿）、R（红）的顺序排列，每一个值的范围为 0（最暗）~255（最亮）。

使用 imshow 函数可以将图像信息显示为一个窗口中的图像，其格式为：
OpenCV 中使用 imshow 显示图像后必须使用一个 waitKey 函数。函数的参数值为以

毫秒为单位的时间，表示在显示一帧后等待这些时间再继续。

8.用 OpenCV 识别颜色

使用 OpenCV 调取图像的信息只是我们分析图像的第一步，OpenCV 的强大之处在

于它可以通过一些预置函来方便地处理这些信息。机器视觉技术识别物体首先需要确定物体

的位置，勾勒出其轮廓，而区分物体与背景的关键在于颜色的分界。

8.1HSV 颜色空间

OpenCV 读取的图像信息在每一像素上都由 B、G、R 的颜色值排列而成，但事实上

用这 3 个颜色值来区分颜色并不像想象中那么简单：同一物体的三原色值在环境光照变化

的情况下将发生很大的变化，使用一定的颜色区间来锁定特定物体几乎是不可能完成的任务。

为了解决这一问题，我们可以使用另一种描述颜色的方式：HSV 颜色空间。

相比直接用三原色值来表述颜色，使用颜色的另外一些属性来描述它们更符合人眼对颜

色的认知。这些属性包括颜色的色相（Hue）、饱和度（Saturation）、亮度（Value）。

使用这 3 种颜色属性描绘颜色的方法于 1978 年由计算机科学家 Alvy Ray Smith 提出，这

些值可以用三原色值经过简单的数学转换得到。

色相（H）是颜色的基本属性。我们可以将三原色红、绿、蓝置于一个圆盘的 0°、

120°和 240°位置，然后将其他颜色插入排列。

饱和度（S）代表颜色的纯度或“鲜艳程度”。颜色的饱和度越高，则色彩越“纯正”。

亮度（V）代表颜色的明亮程度。亮度越大则颜色越亮，否则越暗。

图 5.13 所示为 HSV 颜色空间的图示，这种描绘颜色的方式相对三原色更接近人的视

觉感受，H、S、V 三种颜色值的变化可以被人眼敏锐地感觉到。通常，色相（H）的取值

范围为 0~360，而饱和度（S）与亮度（V）被划为 100 份，取值范围为 0~100。

在 Geany 中，我们可以单击运行键右侧的按键打开颜色选择器，从这里可以获取不同

颜色的 HSV 值与 RGB 值

OpenCV 中有一个内置函数 cvtColor 可以方便地将图像信息从一个颜色空间转换到另

一个颜色空间，例如：

hsv = cv2.cvtColor(frame, cv2.COLOR_BGR2HSV)

这一语句可以将原本 BGR 颜色空间上的 frame 信息转换为 HSV 颜色空间并存储到

hsv 中。需要注意的是，OpenCV 中 H 值的取值范围是 0~180，S 和 V 值则是 0~255。

若将通常的 HSV 值代入 OpenCV 中分析，须先对 H、S、V 分别按比例转换。

我们常见的颜色都处于 HSV 颜色空间的某个范围内。图 5.15 所示为一些颜色的大致

范围（按照 OpenCV 的取值范围）。

9.图像的二值化

在 HSV 颜色空间中，我们可以设定出待检测物体颜色所在的区间。假定待检测物

体是一个较均匀的黄色物体，其颜色值的范围为：H 值 26~34，S 值 43~255，V 值

46~255。我们可以将这个范围设定一个下限和上限并分别定义：

这种定义方式事实上是建立了元组类型的变量

接下来为了勾勒出这个物体的轮廓，需要先将图像中属于这个区间的像素与不属于这

个区间的像素进行分割。为了方便，我们可以将属于这个区间的像素直接取值为 1，而将

不属于这个区间的像素取值为 0，这样就构成了一个只由 0 和 1 排列的图像信息。使用

OpenCV 中的 inRange 函数可以轻松地完成这一步骤：

函数返回一个 0 和 1 排列而成的图像信息。这种将图像的所有像素用 0 和 1 表示的方

法被称为图像的二值化。二值化是处理计算机图像时常用的一种数学方法。若将值为 0 的

像素用黑色标出，而将 1 用白色标出，inRange 函数可以完成图 5.16 所示的转换。

9.1找到轮廓的位置

接下来我们可以通过二值化图像方便地找出黑、白区域分界线的位置，即待检测物体的

轮廓。寻找二值化图像轮廓可以用 findContours 函数来实现：

这里，我们传入的第一个参数“图像信息”是二值化的图像信息。

第二个参数“输出模式”指定输出轮廓的类型，主要有以下 3 种类型。

cv2.RETR_EXTERNAL：只输出外轮廓。

cv2.RETR_LIST：输出所有轮廓。

cv2.RETR_TREE：输出所有轮廓，并输出轮廓间的包含关系。

第三个参数“输出方法”指的则是输出的轮廓信息所包含的内容，主要有以下两种输出

方法。

cv2.CHAIN_APPROX_SIMPLE：只输出拐角点的坐标。

cv2.CHAIN_APPROX_NONE：输出所有连续点的坐标