多媒体技术与应用知识点整理

lec1

区分灰度图和二值图

二值图像是指每个像素不是黑，就是白，其灰度值没有中间过渡的图像，这种图像又称为黑白图像。二值图像的每一个像素只有两个值0和1，其中0表示黑色，1表示白色。二值图每个像素只有两个值，所以每个像素只需要1bit即可存储。
灰度图是在二值图像的基础上使用8bit来存储每一个像素的值，所以其范围在0~255之间，因此标准灰度图像中每个像素的灰度值是0-255之间的1个值，灰度级数为256级，因此不同于二值图像，灰度图像的颜色信息更加丰富，不仅仅只有白色和黑色，还有各种灰色，共有256个灰度值。

多媒体技术的应用

图像处理应用领域：
通信、宇宙检测、遥感、生物医学、工业生产、军事、公安、档案、机器人识别、娱乐
教育：空乘服务模拟实训系统，
商业应用：多媒体沙盘、虚拟主持人、虚拟讲解员、展会虚拟翻书台。

媒体的分类

★Perception Medium (感觉媒体）: text，graphics，audio音频，video视频…
★Representation Medium（表示媒体）：ASCII, Codes编码
★Presentation Medium(呈现媒体): Input and output
★Storage Medium（存储媒体）：Hard Disk, Floppy Disc软盘, CD, DVD
★Transmission Medium（传输媒体）：如电话线、双绞线、同轴电缆、光纤、无线电和红外线等。

语言、图像、文本属于感觉媒体，语言编码不是。
表示媒体指的是为了传送感觉媒体而人为研究出来的媒体。
一般认为，多媒体技术研究的兴起从1984年，美国Apple公司推出Macintosh系列机开始。

PS：1984年Apple公司的Macintosh个人计算机，首先引进了“位映射”的图形机理，用户接口开始使用Mouse驱动的窗口技术和图符。

多媒体技术定义

计算机综合处理多种媒体信息(文本、数字图形、图像、音频和视频等)，使多种信息建立逻辑连接，集成为一个系统并具有交互性。

多媒体的特性

多样性、集成性、交互性、数字化。
媒体的多样性，其中至少有一种连续媒体；
媒体的集成性（综合性），多种不同媒体综合地表现某个内容，取得更好的效果；
处理的交互性，使人们获取和使用信息的过程中具有细粒度的控制和操纵能力。

多媒体的关键技术

视频、音频数据的压缩、解压缩
大容量信息存储
人机交互：人机交互技术包括媒体变换技术、媒体识别技术、媒体理解技术和综合技术。
媒体理解技术是对信息进行更进一步的分析处理和理解信息内容。如自然语言理解、图像理解、模式识别等技术。
多媒体数据库：
图像检索：CBIR基于内容的图像检索、基于草图sketch的图像检索
音频检索
视频检索：基于语音识别的视频检索、基于视频的人脸识别
虚拟现实：虚拟现实技术是在众多相关技术上发展起来的一个高度集成的技术，是计算机软硬件技术、传感技术、机器人技术、人工智能及心理学等飞速发展的结晶。
多媒体通信：多媒体通信技术完成大数据量的连续媒体信息的实时传输、时空同步、数据压缩
及多媒体的混合传输技术。

总结
定 义：综合处理声、文、图信息
特 点：多样性、集成性、交互性、时空约束性。
关键技术：视频音频信号处理技术；
多媒体数据压缩技术；
多媒体信息分析与理解
视频音频数据的实时处理技术；
多媒体的表现与交互技术