用Delphi开发视频聊天软件

======================================================
注：本文源代码点此下载
======================================================

一、引言

我们知道视频聊天软件的关键技术在于采集视频,并实时传输给聊天软件在线的人。对于视频的采集,这里采用微软公司的关于数字视频的一个软件包vfw(video for windows)。相信很多人对它都很熟习,vfw能使应用程序通过数字化设备从传统的模拟视频源得到数字化的视频剪辑,vfw的一个关键思想是播放时不需要专用硬件。为了解决数字视频数据量大的问题,需要对数据进行压缩,而vfw引进了avi的文件标准。该标准未规定如何对视频进行捕捉、压缩及播放,仅规定视频和音频该如何存储在硬盘上及在avi文件中交替存储视频帧和与之相匹配的音频数据。通过vfw,开发人员通过发送消息或设置属性来捕捉、播放和编辑视频剪辑。当用户在安装vfw时,安装程序会自动地安装配置视频所需要的组件,如设备驱动程序、视频压缩程序等。vfw主要由6个模块组成。vfw功能模块:

avicap.dll 包含执行视频捕捉的函数,它给avi文件的i/o处理和视频、音频设备驱动程序提供一个高级接口

msvideo.dll 包含一套特殊的drawdib函数,用来处理屏幕上的视频操作

mciavi.drv 包括对vfw的mci命令解释器的驱动程序

avifile.dll 包含由标准多媒体i/o(mmio)函数提供的更高的命令,用来访问.avi文件

icm 压缩管理器,用于管理的视频压缩/解压缩的编译码器(codec)

acm 音频压缩管理器,提供与icm相似的服务,适用于波形音频

对于视频的传输,我们使用udp来传,因为udp传输速度快,tcp是面向连接的,建立连接时双方需经过三次握手,数据传输可靠,ftp、telnet等就是基于tcp的,udp是面向非连接的,发出信息不需对方确认,但这样速度比tcp快,但有可能丢失数据,象smtp、tftp等就是基于udp的。另外udp还支持广播,udp广播两种,一种是directed broadcast,比如你的网段是192.168.0.x,你就往192.168.0.255发就可以了。另一种是limited broadcast,广播地址是255.255.255.255

二、视频聊天软件的开发步骤

2.1 创建捕捉窗口,采集视频

在进行视频捕捉之前必需要先创建一个捕捉窗口,并应以此为基础进行所有的捕捉及设置操作。捕捉窗口可用avicap窗口类的"capcreatecapturewindow"函数来创建,其窗口风格可设置为wschild和ws_visible参数。

有了捕捉窗口,我们就可以将视频流和音频流捕捉到一个avi文件中;动态地同视频和音频输入器件连接或断开;用overlay或preview模式对输入的视频流进行实时显示,设置捕捉速率,显示控制视频源、视频格式及视频压缩的对话框,创建、保存或载入调色板,将图像和相关的调色板拷贝到剪贴板,将捕捉的单帧图像保存到bmp格式文件中。

2.2 捕捉窗口和驱动程序的关联

仅仅一个捕捉窗口是不能工作起来的,它必须要与一个设备相关联才能取得视频信号。用函数capdriverconnect可使捕捉窗与其设备驱动程序相关联。

2.3设置视频设备的属性

通过设置tcaptureparms结构变量的各个成员变量,可以控制设备的采样频率、中断采样按键、状态行为。设置好tcaptureparms结构变量后,可以用函capcapturesetsetup使设置生效。之后还可以用cappreviewscale、cappreviewrate设置预览的比例与速度,也可以直接使用设备的默认值。

2.4打开预览

利用函数capoverlay可选择是否采用叠加模式预览,以使系统资源占用小,视频显示速度加快。然后用cappreview启动预览功能,这时就可以在屏幕上看到来自摄像头的图像了。

2.5使用捕捉窗回调函数

前的四个步骤就可以建立一个基本的视频捕捉程序了,如果想自己处理从设备捕捉到的视频数据,则要使用捕捉窗回调函数来处理,比如一帧一帧地获得视频数据,也可以以流的方式获得视频数据等等。

2.6传输视频流

使用回调函数可以取得第一帧的数据,我们使用网络技术将数据发给其它机器,其它机品将接收的数据显示出来。

2.7接收视频

接收udp数据,同时将接收到的数据回显出来,这样就可以看到远处传来的视频了。

三、用delphi编写程序代码

微软的vfw sdk只有vc和vb版,并没有delphi版,不过在网上可以找到vfw.pas文件,fw.pas文件声明了调用dll中的各个函数和变量。(注:源代码中提供了vfw.pas文件)

下面就以delphi7开发一个网络视频聊天软件,聊天软件分两个程序,一个是视频采集程序并进行udp广播的视频聊天软件服务器,另一个是接收udp广播程序显示传来的视频数据的视频聊天软件客户端。

3.1建立视频聊天软件服务器

3.1.1新建一个工程,命名为project1.dpr,并把vfw.pas加到use中

3.1.2在form1上放置一个tpanel控件,该控件用于显示视频。之后再放置两个tbutton控件,一个caption为"开始",另一个name为"停止",放置一个udp组件,这里用indy的idudpclient用来传输视频,如图示:

3.1.3定义全局变量

capwnd:thandle; //定义捕捉窗句柄

capparms:tcaptureparms; //用于设置设备属性的结构变量

bmpinfo:tbitmapinfo; //bmp图像信息

3.1.4编码事件代码

开始按钮代码:

capwnd := capcreatecapturewindow('我的窗口', ws_visible or ws_child,//窗口样式 0, //x坐标 0, //y坐标 panel1.width, //窗口宽 panel1.height, //窗口高 panel1.handle, //窗口句柄 0); //通常为0

if capwnd = 0 then exit; //定义帧捕捉回调函数

capsetcallbackonframe(capwnd,framecallback);

capparms.dwrequestmicrosecperframe:=1;

capparms.flimitenabled:=false;

capparms.fcaptureaudio:=false;

capparms.fmcicontrol:=false;

capparms.fyield:=true;

capparms.vkeyabort:=vk_escape;

capparms.fabortleftmouse:=false;

capparms.fabortrightmouse:=false; //让设置生效

capcapturesetsetup(capwnd,@capparms,sizeof(tcaptureparms));

cappreviewrate(capwnd,33); //设置预览视频的频率

capcapturesequencenofile(capwnd); //如果要捕捉视频流,则要使用函数来指定不生成文件,不然会自动生成avi文件 capdriverconnect(capwnd,0); //连接摄像头设备,第二个参数是个序号,当系统中装有多个显示驱动程序时,其值分别依次为0到总个数如果有多个摄像头,那么就是0->1->2

capgetvideoformat(capwnd, @bmpinfo,sizeof(tbitmapinfo)); //取得视频图像数据头

cappreviewscale(capwnd,true); //是否缩放

capoverlay(capwnd,true); //指定是否使用叠加模式,true为使用,否则为falsecappreview(capwnd,true);

回调函数代码:

var hd:thandle;

jpg:tjpegimage;

memstream :tmemorystream;

bitmap:tbitmap;

begin //将数据显在image,

bitmap:=tbitmap.create;

bitmap.width :=bmpinfo.bmiheader.biwidth;

// new size of bitmap

bitmap.height:=bmpinfo.bmiheader.biheight;

hd:= drawdibopen; drawdibdraw(hd,bitmap.canvas.handle,0,0,_

bmpinfo.bmiheader.biwidth,bmpinfo.bmiheader.biheight,_

@bmpinfo.bmiheader,lpvhdr^.lpdata,0,0,bmpinfo.bmiheader.biwidth,_

bmpinfo.bmiheader.biheight,0);

drawdibclose(hd); //发送数据

memstream := tmemorystream.create;

jpg := tjpegimage.create;

jpg.assign(bitmap);

jpg.compressionquality := 10; //jpg压缩质量

jpg.jpegneeded;

jpg.compress;

jpg.savetostream(memstream);

jpg.free; //因为udp数据包有大小限制,这里如果超出部分,就没有传输,完全可以发几次发出去

form1.idudpclient1.broadcastenabled:=true;//用广播功能

if memstream.size>form1.idudpclient1.buffersize then

//向192.168.0.x网段广播,端口 9001

form1.idudpclient1.sendbuffer('192.168.0.255',9001,memstream.memory^,form1.idudpclient1.buffersize) else form1.idudpclient1.sendbuffer('192.168.0.255',9001,memstream.memory^,memstream.size);

memstream.free;

bitmap.free;

end;

停止代码:

capcaptureabort(capwnd); //停止捕捉 capdriverdisconnect(capwnd); //将捕捉窗同驱动器断开

完整的视频聊天软件服务器代码:

unit unit1;

interfaceuses windows, messages, sysutils, variants, classes, graphics, controls, forms, dialogs, stdctrls, extctrls,vfw, idbasecomponent, idcomponent, idudpbase, idudpclient,jpeg;type tform1 = class(tform) panel1: tpanel;

button1: tbutton;

button2: tbutton;

idudpclient1: tidudpclient;

procedure button1click(sender: tobject);

procedure button2click(sender: tobject);

private { private declarations }

public { public declarations }

end;

var form1: tform1;

capwnd:thandle; //定义捕捉窗句柄

capparms:tcaptureparms; //用于设置设备属性的结构变量

bmpinfo:tbitmapinfo; //bmp图像信息

implementation{$r *.dfm}

function framecallback(hwnd: hwnd; lpvhdr: pvideohdr): longint;stdcall;

var hd:thandle;

jpg:tjpegimage;

memstream :tmemorystream;

bitmap:tbitmap;

begin //将数据显在image,

bitmap:=tbitmap.create;

bitmap.width :=bmpinfo.bmiheader.biwidth;

// new size of bitmap

bitmap.height:=bmpinfo.bmiheader.biheight;

hd:= drawdibopen;

drawdibdraw(hd,bitmap.canvas.handle,0,0,bmpinfo.bmiheader.biwidth,bmpinfo._

bmiheader.biheight,@bmpinfo.bmiheader,_

lpvhdr^.lpdata,0,0,bmpinfo.bmiheader.biwidth,bmpinfo.bmiheader.biheight,0);

drawdibclose(hd);

//发送数据

memstream := tmemorystream.create;

jpg := tjpegimage.create; jpg.assign(bitmap);

jpg.compressionquality := 10;

//jpg压缩质量

jpg.jpegneeded;

jpg.compress;

jpg.savetostream(memstream);

jpg.free;

//因为udp数据包有大小限制,这里如果超出部分,就没有传输,完全可以发几次发出去

form1.idudpclient1.broadcastenabled:=true;//用广播功能

if memstream.size>form1.idudpclient1.buffersize then

//向192.168.0.x网段广播,端口 9001

form1.idudpclient1.sendbuffer('192.168.0.255',9001,memstream.memory^,form1.idudpclient1.buffersize)

else

form1.idudpclient1.sendbuffer('192.168.0.255',9001,memstream.memory^,memstream.size);

memstream.free;

bitmap.free;

end;

procedure tform1.button1click(sender: tobject);

begin

capwnd := capcreatecapturewindow('我的窗口', ws_visible or ws_child,//窗口样式

0, //x坐标

0, //y坐标

panel1.width, //窗口宽

panel1.height, //窗口高

panel1.handle, //窗口句柄

0); //通常为0

if capwnd = 0 then exit; //定义帧捕捉回调函数

capsetcallbackonframe(capwnd,framecallback);

capparms.dwrequestmicrosecperframe:=1;

capparms.flimitenabled:=false;

capparms.fcaptureaudio:=false;

capparms.fmcicontrol:=false;

capparms.fyield:=true;

capparms.vkeyabort:=vk_escape;

capparms.fabortleftmouse:=false;

capparms.fabortrightmouse:=false; //让设置生效

capcapturesetsetup(capwnd,@capparms,sizeof(tcaptureparms));

cappreviewrate(capwnd,33); //设置预览视频的频率

capcapturesequencenofile(capwnd); //如果要捕捉视频流,则要使用函数来指定不生成文件,不然会自动生成avi文件

capdriverconnect(capwnd,0); //连接摄像头设备,第二个参数是个序号,当系统中装有多个显示驱动程序时,其值分别依次为0到总个数如果有多个摄像头,那么就是0->1->2 capgetvideoformat(capwnd, @bmpinfo,sizeof(tbitmapinfo)); //取得视频图像数据头

cappreviewscale(capwnd,true); //是否缩放

capoverlay(capwnd,true); //指定是否使用叠加模式,true为使用,否则为false cappreview(capwnd,true);end;procedure tform1.button2click(sender: tobject);

begin capcaptureabort(capwnd); //停止捕捉

capdriverdisconnect(capwnd); //将捕捉窗同驱动器断开

end;

end.

3.2建立视频聊天软件客户端

3.2.1新建一个工程,命名为project2.dpr

3.2.2在程序窗口form2上放置一个image控件,该控件用于接收的图像内容,再放置一个tbutton控件,caption为"接收",,放置一个udpserver组件,这里用indy的idudpserver用来接收网络视频,如图示:

接收按钮代码:

idudpserver1.defaultport:=9001; //接收端口 idudpserver1.active:=true; //启用

idudpserver1的udpread事件代码:

var jpg:tjpegimage;begin try jpg := tjpegimage.create; jpg.loadfromstream(adata); image1.picture.bitmap.assign(jpg); jpg.free; exceptend;end;

视频的传输是压缩成jpg进行传输的,服务器端和接收端都用到了jpeg单元,所以use中都要加入jpeg。

完整的视频聊天软件客户端代码:

unit unit2;

interfaceuses windows, messages, sysutils, variants, classes, graphics, controls, forms, dialogs, stdctrls, idbasecomponent, idcomponent, idudpbase, idudpserver, extctrls,jpeg,idsockethandle;

type tform1 = class(tform) image1: timage;

idudpserver1: tidudpserver;

button1: tbutton;

procedure button1click(sender: tobject);

procedure idudpserver1udpread(sender: tobject;

adata: tstream; abinding: tidsockethandle);

private { private declarations }

public

{

public declarations

}

end;

var form1: tform1;

implementation{$r *.dfm}procedure tform1.button1click(sender: tobject);

begin

idudpserver1.defaultport:=9001; //接收端口

idudpserver1.active:=true; //启用

end;

procedure tform1.idudpserver1udpread(sender: tobject;adata: tstream; abinding: tidsockethandle);

var jpg:tjpegimage;

begin

try

jpg := tjpegimage.create;

jpg.loadfromstream(adata);

image1.picture.bitmap.assign(jpg);

jpg.free;

except

end;

end;

end.

好了,到这里程序代码也就写完了。在机上运行视频聊天软件服务器程序,点开始就开始进行视频的传输了,在网络上(网段为192.168.0.x,根据你的网络设置ip地址,我这用的局域网测试)的任何一台机上运行视频聊天软件客户端点接收都能接收到视频了。

如果要接收的视频内容清晰点,可以设置jpg.compressionquality:=10;(这个值可以是从1至100,数值越大,图像越清晰,当然传输的速度会越慢了,图像越清晰,数据包就会越大,如果超出了udp包限制,看到图像就不完整了)

视频聊天软件服务器

聊天软件客户端

四、结束语

在这里,我把自己的一些经验和代码拿出来与大家一起分享,请高手不要扔鸡蛋啊,我真的是花了不少力气的!看了这篇文章后,相信你也可以自己动手做一个网络视频聊天软件,也可以做个类似msn、qq、e话通一样的视频聊天软件,有了网络视频就可以在千里之外和家人进行可视通讯了。上面的示例程序还有很多地方需要改进的,比如视频的压缩可以用其它视频压缩编码器进行压缩,这里只讲了传输图像,并没有声音,再改一下就才能传输音视频了,有兴趣的朋友不妨自己动手去试一试。

======================================================
在最后，我邀请大家参加新浪APP，就是新浪免费送大家的一个空间，支持PHP+MySql，免费二级域名，免费域名绑定 这个是我邀请的地址，您通过这个链接注册即为我的好友，并获赠云豆500个，价值5元哦！短网址是http://t.cn/SXOiLh我创建的小站每天访客已经达到2000+了，每天挂广告赚50+元哦，呵呵，饭钱不愁了，\(^o^)/