iOS 简单的视频直播功能开发(实时视音频流录制编码+RTMP传输+实时拉流解码播放)

最新推荐文章于 2023-07-20 17:35:58 发布
最新推荐文章于 2023-07-20 17:35:58 发布
阅读量1.1w 收藏 18
点赞数 3
文章标签： iOS 推流 拉流 RTMP 视频直播
版权声明：本文为博主原创文章，遵循 CC 4.0 BY-SA 版权协议，转载请附上原文出处链接和本声明。
本文链接：https://blog.csdn.net/pilgrim1385/article/details/51681332
版权
推流端：自己开发难度很大，视频直播就被卡死了，音频根本没来得及弄，最终使用了github上开源的框架。               原生开发基本流程：AVFoundation获取视频流，得到未编码的CMSampleBuffer，需要编码成Mpeg-4格式。编码分软编码和硬编码，考虑到iOS8之后VideoToolBox开放使用，选用VideoToolBox进行编码。坑爹的是针对它连
摘要由CSDN通过智能技术生成
推流端：自己开发难度很大，视频直播就被卡死了，音频根本没来得及弄，最终使用了github上开源的框架。

               原生开发基本流程：AVFoundation获取视频流，得到未编码的CMSampleBuffer，需要编码成Mpeg-4格式。编码分软编码和硬编码，考虑到iOS8之后VideoToolBox开放使用，选用VideoToolBox进行编码。坑爹的是针对它连文档都没有。github上有一个二次开发的OC版本叫VideoToolBoxPlus，地址：https://github.com/McZonk/VideoToolboxPlus，成功度过硬编码难关。推流选择使用RTMP，选择第三方库libRTMP，并编译成功。编译方法在上一篇笔记中。服务器采用Nginx+rtmp搭建，地址：
最低0.47元/天 解锁文章
pilgrim1385
关注
  • 3
    点赞
  • 踩
  • 18
    收藏
    觉得还不错? 一键收藏
  • 3
    评论
librtmp 拉取rtmp流保存为flv或者h264
12-15
自己写的一个很稳定的程序，使用librtmp 库 拉取 rtmp, 然后提取视频保存为flv 或者 h264的工程，vs2008
流媒体-RTMP协议-librtmp库学习（二）
bwangk的博客
01-19 1870
文章目录librtmp 库相关结构体RTMP 结构体RTMP_LNK 结构体RTMPPacket 结构体：描述实时消息协议的分块AMF(Action Message Format): 动作消息格式AVal结构体：自定义字符串推流InitSockets() 初始化SocketRTMP_Alloc() 用于创建一个RTMP的结构体RTMP_Init() 初始化结构体RTMP_SetupURL() 设置推拉流的URLRTMP_ParseURL() 解析输入URLRTMP_EnableWrite() 设置为推流状态
【初学音视频】RTMP拉流保存h264（flv保存为h264）
自学半天的大一麦克的博客
01-07 1639
这篇博客主要讲述使用srs_librtmp拉流，大概会提一下librtmp拉流，详情请关注大神雷神（雷霄骅）的博客https://blog.csdn.net/leixiaohua1020/article/details/12971635 此外，此篇博客讲的是RTMP拉流保存为h264格式，所以要确保流中视频的格式是AVC（H.264） 使用librtmp拉流 librtmp是通过调用i...
流媒体之RTMP——librtmp拉流测试
一步的专栏
10-11 3055
Test LibRTMP Puller 文章目录Test LibRTMP Puller一：LibRTMP拉流1.1 拉流保存成FLV1.2 拉流解析出H264和AAC 作者：一步(Reser) 日期：2019.10.11 一：LibRTMP拉流 1.1 拉流保存成FLV 常见的使用方式是直接拉流成 FLV 文件： /** * @brief: * Test librtmp of pulling s...
音视频编程之FFmpeg解码视频保存为图片
weixin_39308337的博客
06-26 1525
FFmpeg介绍 FFmpeg基础结构
iOS直播类APP开发流程解析
01-21
 数据采集→数据编码→数据传输(流媒体服务器) →解码数据→播放显示 1、数据采集： 摄像机及拾音器收集视频及音频数据，此时得到的为原始数据 涉及技术或协议： 摄像机：CCD、CMOS 拾音器：声电转换装置（咪头）、...
flv-demo_htmlflv.js拉流_flv.js自动播放_flv.js参数说明_flvjsjs拉流_flv直播流播放_源
10-04
7. **FLV直播流播放**：`flv.js`支持实时直播流播放，通过持续拉取服务器上的新数据来实现无延迟或低延迟的观看体验。 8. **源代码示例**：在`flv-demo`项目中，你可以找到一个简单的示例，展示如何使用`flv.js`...
ffmpeg飞机拉流USB传输IOS解码OK
09-01
在“ffmpeg飞机拉流USB传输IOS解码OK”的场景中，我们可以解读出几个关键的技术点，它们涉及到使用FFmpeg进行流媒体传输、USB通信以及在iOS设备上的解码。 1. **FFmpeg 流媒体拉取**: “拉流”通常指的是客户端主动...
RTMP+HLS直播代码视频
11-16
RTMP是由Adobe Systems开发的一种协议，主要用于将音频、视频和数据从服务器实时传输到客户端，如Adobe Flash Player。它的优点在于低延迟，适合实时性要求高的应用场景，如在线游戏直播和金融交易直播。然而，由于...
Android IjkPlayer 播放RTSP/RTMP视频流 Demo 可运行
最新发布
04-01
在Android平台上，开发人员经常需要处理视频播放任务，特别是实时流媒体服务如RTSP (Real-Time Streaming Protocol) 和RTMP (Real-Time Messaging Protocol)。IjkPlayer是一个强大的开源媒体播放器库，它由Bilibili...
RTMP解析
hanms的博客
08-04 2589
RTMP协议是Real Time Message Protocol(实时信息传输协议)的缩写，它是由Adobe公司提出的一种应用层的协议，用来解决多媒体数据传输流的多路复用（Multiplexing）和分包（packetizing）的问题。随着VR技术的发展，视频直播等领域逐渐活跃起来，RTMP作为业内广泛使用的协议也重新被相关开发者重视起来。RTMP协议是应用层协议，是要靠底层可靠的传输层协议（通常是TCP）来保证信息传输的可靠性的。
【深度学习】使用ffmpg及gstreamer进行视频拉流及编解码（一）：ffmpg
种一棵树最好的时间是十年前，其次是现在
03-30 5152
GStreamer：一款功能强大的多媒体框架，可以用于音视频的采集、编码、解码、处理和传输。FFmpeg：一个开源的音视频处理工具，可以用于音视频的采集、编码、解码、转码、处理等。FFmpeg和GStreamer都是流媒体处理框架，它们在音视频编解码、转码、过滤、采集等方面都有广泛的应用。FFmpeg是一个开源的音视频处理库，支持多种音视频格式的编解码、转码、过滤等操作。
ffmpeg笔记_视频解码
Lee notes
11-18 643
// TODO 摘抄 #include <stdio.h> #include <stdlib.h> #include <string.h> #include <libavformat/avformat.h> #include <libavcodec/avcodec.h> #include <libswscale/swscale.h> #define INBUF_SIZE 4096 #define WORD uint16_t #de
iOS开发之利用IJKPlayer+nginx+rtmp搭建直播的推流和拉流
hbblzjy的博客
06-29 3326
最近项目中想实现直播的功能，所以研究了一段时间的直播功能，当然也是在别人的基础上不断的学习实现的，所以记录一下，希望对大家有所帮助。直播拉流功能：这里使用了开源的IJKPlayer第三框架，ijkplayer 是一款做视频直播的框架, 基于ffmpeg，是大多数搭建直播平台的首选框架，当然各大云平台都有自己的直播框架，具体大家使用的时候可以自行研究，有问题再留言，我这里不再说明框架的集成和拉流过程
ios录音-如何实现后台录音和推流功能
wu_yan00的博客
03-22 2074
对于我们的app要求后台也实时录音并推流主要要注意两点: 保证app进入后台后实时录音 保证app进入后台后实时推流 1.设置应用为voip应用 打开-info.plist文件，加入如下的key Required background modes，追加 //保证app进入后台后实时录音 App plays audio or streams audio/video using AirP...
IOS系统中H.264视频流如何实现硬件解码
m0_60259116的博客
07-20 398
IOS系统中H.264视频流如何实现硬件解码
基于iOS的网络音视频实时传输系统（二）- 捕获音视频数据
念念不忘，必有回响。
09-25 2548
获取音视频数据，这里使用的是AVCaptureSession，可以方便地自定义相机界面，看起来大概是这样的：
基于iOS的网络音视频实时传输系统(H264+pcm+videoToolbox)无第三方实现
github_35041937的博客
04-10 1492
基于iOS的网络音视频实时传输系统(H264+pcm+videoToolbox)无第三方实现
声网Agora 初级认证课程（iOS）
09-11
实操教程，手把手教会你如何搭建视频通话、多人视频会议、在线课堂、直播连麦等实时音视频互动应用场景，并有声网资源音视频算法工程师带你了解RTC技术原理，带你入门。认证培训考试部分答案可参考声网Agora开发文档，详见docs.agora.io。认证考试通过后即可获得声网Agora初级认证证书。
c++ 实现opencv解码编码+ffmpeg给nginx推送rtmp流
06-06
要实现这个功能，你可以使用以下步骤： 1. 使用OpenCV库来解码和编码视频流。你可以使用cv::VideoCapture来解码视频文件，并使用cv::VideoWriter来编码视频文件。 2. 使用FFmpeg库来推送RTMP流。你需要使用FFmpeg的API来打开一个RTMP流，并使用avcodec_encode_video2()函数将OpenCV编码后的视频帧推送到流中。 3. 将RTMP流推送到Nginx服务器。你可以使用RTMP协议将视频流推送到Nginx服务器。在Nginx服务器上，你需要配置一个RTMP模块，并使用推流URL将视频流推送到服务器上。 以下是一个简单的示例代码，可以实现将OpenCV视频流编码并推送到Nginx服务器。 ```cpp #include <opencv2/opencv.hpp> #include <libavcodec/avcodec.h> #include <libavformat/avformat.h> #include <libavutil/opt.h> #include <libavutil/imgutils.h> #include <libavutil/time.h> #include <librtmp/rtmp.h> int main(int argc, char *argv[]) { // OpenCV video capture and video writer cv::VideoCapture cap(argv[1]); cv::Mat frame; cv::VideoWriter writer("output.mp4", cv::VideoWriter::fourcc('M','J','P','G'), 25, cv::Size(640, 480)); // FFmpeg RTMP stream av_register_all(); avcodec_register_all(); AVFormatContext *fmt_ctx = nullptr; AVOutputFormat *out_fmt = nullptr; AVStream *out_stream = nullptr; AVCodec *codec = nullptr; AVCodecContext *codec_ctx = nullptr; AVPacket pkt; int ret = 0; // Open RTMP stream RTMP *rtmp = RTMP_Alloc(); RTMP_Init(rtmp); RTMP_SetupURL(rtmp, "rtmp://localhost/live/mystream"); RTMP_EnableWrite(rtmp); // Connect to RTMP stream if (!RTMP_Connect(rtmp, nullptr)) { if (!RTMP_ConnectStream(rtmp, 0)) { // Create AVFormatContext avformat_alloc_output_context2(&fmt_ctx, nullptr, "flv", "rtmp://localhost/live/mystream"); if (!fmt_ctx) { fprintf(stderr, "Could not create output context\n"); return -1; } // Create video stream out_fmt = fmt_ctx->oformat; codec = avcodec_find_encoder(out_fmt->video_codec); out_stream = avformat_new_stream(fmt_ctx, codec); if (!out_stream) { fprintf(stderr, "Could not create video stream\n"); return -1; } codec_ctx = avcodec_alloc_context3(codec); avcodec_parameters_to_context(codec_ctx, out_stream->codecpar); codec_ctx->width = 640; codec_ctx->height = 480; codec_ctx->time_base = {1, 25}; codec_ctx->framerate = {25, 1}; codec_ctx->pix_fmt = AV_PIX_FMT_YUV420P; avcodec_open2(codec_ctx, codec, nullptr); // Write header avformat_write_header(fmt_ctx, nullptr); // Encode and push frames while (cap.read(frame)) { // Encode frame ret = avcodec_send_frame(codec_ctx, av_frame); if (ret < 0) { fprintf(stderr, "Error sending frame to encoder\n"); break; } while (ret >= 0) { ret = avcodec_receive_packet(codec_ctx, &pkt); if (ret == AVERROR(EAGAIN) || ret == AVERROR_EOF) break; else if (ret < 0) { fprintf(stderr, "Error receiving packet from encoder\n"); break; } // Write packet pkt.stream_index = out_stream->index; av_interleaved_write_frame(fmt_ctx, &pkt); av_packet_unref(&pkt); // Push packet to RTMP stream RTMP_Write(rtmp, (char *)pkt.data, pkt.size); } // Write frame to OpenCV video writer writer.write(frame); } // Write trailer av_write_trailer(fmt_ctx); // Close RTMP stream RTMP_Close(rtmp); RTMP_Free(rtmp); // Cleanup avcodec_free_context(&codec_ctx); avformat_free_context(fmt_ctx); } } return 0; } ``` 注意，这只是一个简单的示例代码，还需要进行更多的错误检查和异常处理。

“相关推荐”对你有帮助么？

  • 非常没帮助
  • 没帮助
  • 一般
  • 有帮助
  • 非常有帮助
提交
评论 3
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值