H264解码器源码,移植ffmpeg中的H264解码部分到Android,深度删减优化,在模拟器(320x480)中验证通过。
程序的采用jni架构。界面部分,文件读取,视频显示都是用java做的,底层的视频解码用C来做满足速度的要求。
在这个版本中,从H264码流中分割出Nal是在java层做的,这样在java层直接调用解码时就知道是否有显示视频,缺点的就是耦合度/封装性差一点。
如果采用在底层做Nal分割的方法,可以封装得好看一些,但是每次送的数据有限制,如果送的数据太多,底层可能会一次解码出好几帧视频,但是通知到界面层只能显示一帧,造成丢帧的现象。 如果每次送的数据较少,就会有很多次底层调用没有进行实质解码,很小气的做法,比如有一压缩数据帧需要600字节,如果一次送100个字节给解码器,那么要送6次才会进行实质解码,因为每个数据帧有大有小,所以只能取极小值才不会导致丢帧。
不过所有的编码解码都是各种因素平衡折中的结果,具体用什么方法具体分析。
如果程序崩溃退出,优先考虑:
2)byte [] NalBuf = new byte[40980]; 缓冲区是否溢出。
如果有B帧,那肯定不是baseline。
为便于支持不同分辨率的码流,修改了代码。现在只需要修改H264Android.java文件中第51,74,75行就可测试新分辨率。
有些大分辨率的码流可能会异常,优先修改H264Android.java文件中第161行把Nal缓冲区改大。
两版本都是用 android-ndk-1.6_r1-windows.zip 和 cygwin 1.7.5-1, gcc4 4.3.4-3 (用 cygcheck -c查看) 编译。
注意 /jni/H264Android.cpp文件添加了extern "C" 关键声明。
解码源码下载地址:http://files.cnblogs.com/mcodec/H264Android.7z
C++版本下载地址:http://files.cnblogs.com/mcodec/H264Android_CPP.7z
测试码流(240x320)下载地址:http://files.cnblogs.com/mcodec/butterfly.h264.rar
测试码流(352x288)下载地址:http://files.cnblogs.com/mcodec/352x288.264.7z
- #ifndef COMMON_H
- #define COMMON_H
- #define WINCE
- #define HAVE_AV_CONFIG_H
- #define EMULATE_INTTYPES
- #define inline __inline
- #define ALT_BITSTREAM_READER
- #define LIBMPEG2_BITSTREAM_READER_HACK //add BERO
- #include <stdlib.h>
- #include <stdio.h>
- #include <string.h>
- #include <ctype.h>
- ///*
- typedef signed char int8_t;
- typedef signed short int16_t;
- typedef signed int int32_t;
- typedef unsigned char uint8_t;
- typedef unsigned short uint16_t;
- typedef unsigned int uint32_t;
- typedef signed long long int64_t;
- typedef unsigned long long uint64_t;
- // */
- main: cabac.o common.o dsputil.o golomb.o h264.o h264utils.o mpegvideo.o main.o
- gcc $^ -o $@
- main.o: main.c
- cabac.o: common.h cabac.h
- common.o: avcodec.h common.h
- dsputil.o: common.h avcodec.h dsputil.h
- golomb.o: common.h
- h264.o: common.h avcodec.h h264.h dsputil.h mpegvideo.h h264data.h \
- golomb.h cabac.h
- h264utils.o: avcodec.h common.h dsputil.h mpegvideo.h h264.h \
- h264data.h golomb.h cabac.h
- mpegvideo.o: avcodec.h common.h dsputil.h mpegvideo.h
- clean:
- -rm main *.o
while(!feof(inpf)) { nalLen = getNextNal(inpf, Buf); consumed_bytes= decode_frame(c, picture, &got_picture, Buf, nalLen); printf("ddd6\n"); #if 1 unsigned char a1[1000000];//保存RGB16 memset(a1, 0, sizeof(a1)); char *pppp=(char *)(picture->data); DisplayYUV_16((unsigned int *)a1, picture->data[0], picture->data[1], picture->data[2] //把AVFrame格式的图片转成RGB16 格式 ,c->width, c->height,picture->linesize[0],picture->linesize[2], iWidth); image= QImage(a1, iWidth, iHeight, QImage::Format_RGB16); //把RGB16格式图片复制到QImage中! widget->update(); //调用刷新 //博客前面"qt界面刷新屏幕"有讲 printf("update1 0k\n"); usleep(100000); //continue; #endif #if 0 //* for(i=0; i<c->height; i++) fwrite(picture->data[0] + i * picture->linesize[0], 1, c->width, outf); for(i=0; i<c->height/2; i++) fwrite(picture->data[1] + i * picture->linesize[1], 1, c->width/2, outf); for(i=0; i<c->height/2; i++) fwrite(picture->data[2] + i * picture->linesize[2], 1, c->width/2, outf); //return 0; // */ #endif /* if(iBytesPixel==2) { unsigned int *rgb = (unsigned int*)(iDDraw->BeginDraw()); DisplayYUV_16(rgb, picture->data[0], picture->data[1], picture->data[2], c->width, c->height, picture->linesize[0], picture->linesize[1], iWidth); iDDraw->EndDraw(); } else if(iBytesPixel==3) { unsigned char *rgb = (unsigned char*)(iDDraw->BeginDraw()); DisplayYUV_24(rgb, picture->data[0], picture->data[1], picture->data[2], c->width, c->height, picture->linesize[0], picture->linesize[1], iWidth); iDDraw->EndDraw(); } else if(iBytesPixel==4) { unsigned int *rgb = (unsigned int*)(iDDraw->BeginDraw()); DisplayYUV_32(rgb, picture->data[0], picture->data[1], picture->data[2], c->width, c->height, picture->linesize[0], picture->linesize[1], iWidth); iDDraw->EndDraw(); } // */ //} } |