fanyun的博客

表单框架XLFromUFKitWMZForm轮播图：iCarousel 使用介绍下拉，上拉刷新：MJRefresh https://github.com/CoderMJLee/MJRefreshAASpringRefresh https://github.com/r-plus/AASpringRefresh/Button样式：SimpleButton https://github.com/aloco/SimpleButton视频播放器 36kr：KrVide

Mac编译ffmpeg获取FFmpeg-iOSffmpeg的H.264解码

FFmpeg的推流一般有两种：1.使用cmd进行推流，这种推流方式一般可用于简单的推流验证 这里拿

在我们的实际项目中，如果工程模块较多，需要每个人负责维护不同的模块，这些模块可以单独设置为代码库。但是更新维护就比较麻烦，如何

当你开发iOS应用时，会经常使用到很多第三方开源类库，比如JSONKit，AFNetWorking等等。可能某个类库又用到其他类库，所以要使用它，必须得另外下载其他类库，而其他类库又用到其他类库，“子子孙孙无穷尽也”，这也许是比较特殊的情况。总之小编的意思就是，手动一个个去下载所需类库十分麻烦，这些体力活虽然简单，但毫无技术含量并且浪费时间。另外一种常见情况是，你项目中用到的类库有更新，你必须得重新下载新版本，重新加入到项目中，十分麻烦。如果能有什么工具能解决这些恼人的问题，那将“善莫大焉”。所以...

Mac openssl未找到/加载失败问题处理OpenSSL 是一个安全套接字层密码库，囊括主要的密码算法、常用的密钥和证书封装管理功能及SSL协议，并提供丰富的应用程序供测试或其它目的使用。Mac OSX 安装新版OpenSSLMac OSX目前可以通过brew 来安装指定版本的OpenSSL。确认已安装的openssl的版本和位置$ which openssl确定版本$ openssl versionbrew安装openssl$ brew install openss

curl: (35) LibreSSL SSL_connect: SSL_ERROR_SYSCALL in connection to raw.githubusercontent.com:443MacOS系统使用Homebrew官方地址时，报错：Mac:~ jc$ /bin/bash -c "$(curl -fsSL https://raw.githubusercontent.com/Homebrew/install/master/install.sh)"curl: (35) LibreSSL

在实际的iOS业务开发中，制作Framework都是经常遇到的，那我们如何对其进行制作哪，首先我们先来看下动态库与静态库的区别，我们了解的越多，那么我们对于自己做的事情也就越得心应手。动态库与静态库的区别：静态库：连接时完整地拷贝至可执行文件中，被多次使用就有多份冗余拷贝；动态库：连接时不复制，程序运行时由系统动态加载到内存，供程序调用，系统只加载一次，多个程序共用，节省内存系统的.framework是动态库，我们自己建立的.framework是静态库.a与.framework的区别a.

新换的Mac本发现没有安装 cocoapods代码管理工具；这个时候就需要先安装配置环境。公司的iOS项目使用了cocoapods来管理第三方库，所以要求所有组员的cocoapods版本一致。一般的就是执行： $ sudo gem install -n /usr/local/bin cocoapods 进行升级即可。升级后输入如下命令查看cocoapods版本： $ pod --version 发现我自己的总是1.0.1，别人的都自动安装了1.1.1版。看了一下别人的机器配置，gem源也都是一样的：...

https://zhuanlan.zhihu.com/p/168240163软解和硬解的区别：一般来说我们把使用CPU通用计算单元（无论是Intel还是AMD）就是软解；用专用芯片模组（GPU、QSV等）就是硬解。主要区别：底层接口不同、指令集不同、硬件驱动不同。FFMPEG原生支持哪些硬解码类型，在AVHWDeviceType（libavutil/hwcontext.h）中列举出所有原生支持的硬解码类型：enum AVHWDeviceType {AV_HWDEVICE_TYPE

UIVideoEditorController类包含了由系统提供的界面，使用户可以交互式的剪切视频。UIVideoEditorController对象处理用户的交互并且提供把编辑后的视频的文件系统路径提供给UIVideoEditorControllerDelegate对象.UIVideoEditorController只支持能够支持视频编辑的设备.我们设置好它的delegate及videoPath属性，并将其展示出来。（经过videoQuality属性，也可以通过这个类将视频重新编码成质量较低的格式）。

FFmpeg给我提供了非常好的视频信息分析的办法，使用ffprobe对音视频流的结构的分析非常方便。首先，可以通过ffprobe --help来查看一些详细的参数的意义usage: ffprobe [OPTIONS] [INPUT_FILE]Main options:-L show license-h topic show help-? topic show help-help topic show help--help topic show help-version s

1.OBS的初始化程序中，首先会调用ResetVideo，执行顺序如下：(1).ResetVideo—>(2).AttemptToResetVideo—>(3).obs_reset_video—>(4).obs_init_video—>(5).video_output_open—>(6).if (pthread_create(&out->thread, NULL, video_thread, out) != 0)最后创建了video_thread，我们

1.视频切片，那么每隔50秒裁剪为一个文件ffmpeg -i input.mp4 -c copy -map 0 -segment_time 00:00:30 -f segment output%03d.mp42.视频抽帧，在视频文件第15 秒位置，提取一张图片ffmpeg -i input.mp4 -r 0.1 -t 20 image%3d.jpg3.为视频打上水印ffmpeg -i sub_video3.mp4 -vf drawtext="fontfile=/usr/share/fon

iOS媒体库框架主要功能：1.1、本地图片视频选择、拍照录制等全封装使用1.2、主体是一个展示的页面，可添加到任何地方，同时处理好了一切布局。1.3、选择图片和图片预览等用到了TZImagePickerController和MWPhotoBrowser两个第三方1.4、自定义媒体model，存储图片、视频上传数据类型，如：NSData或视频路径。1.5、结果：添加该框架到任意页面之后不再需要做其他操作，只需要写上文件上传的网络请求即可。1）UIImageViewController

一般来说，视频播放的横竖屏处理有两种：1、视频播放的选装有两种方式进行处理，一种是旋转的的时候，视频也跟着旋转；2、还有一种可能就是屏幕旋转的时候，通过一个按钮只是选装视频一个横屏，一个为竖屏就好了；对于播放界面不随着屏幕旋转的方式，通过改变keywindow的大小和方向来修改横屏，通过一个按钮的点击事件； 若是通过第1种方案，也就是随着屏幕的旋转播放页面发生了旋转的时候，需要UITraitEnvironment 接口的方法，好像这个方法监听，这个接口的方法调用情况：（1）初始...

1.功能模块框图 OBS整套系统可以分为4大部分：(1).UI层：主要采用Qt绘制；(2).数据输入层：主要对应上obs中场景和各种源，可由界面操作；(3).数据处理层：主要是对输出数据的编码和特效处理；(4).数据输出层：主要是对应推流、本地录制、回放录制、本地渲染预览等。 总体架构如图1-1所示： ...

OBS主要线程共五个:1.主线程：主要做一些初始化工作和UI处理2.视频渲染线程：渲染视频到窗口3.视频编码线程：编码原始视频4.音频编码线程：编码原始音频5.流输出线程：将编码后的音视频数据发送出去。 OBS主要代码流程图如图1-1所示： ...

OBS（Open Broadcaster Software，开放广播软件），免费的开源音视频软件，用于音视频记录和实时流媒体播放。目前的OBS为obs studio版本，它是跨平台重构后的版本，对比原始版本obs classic。obs studio代码中，有一些插件是独立编译的，比如：浏览器插件、摄像头采集插件等，存放位置参考obs studio中同名路径。obs studio版本代码位置：https://github.com/obsproject/obs-studioobs ...

1.什么是OBS？ OBS（Open Broadcaster Software）是免费开源的视频录制和直播软件，支持运行在windows，Mac和linux平台。官方链接https://obsproject.com。OBS有OBS Classic和OBS studio两个版本。OBS classic是早期版本，已经不再维护和更新。现在推荐使用的是OBS studio版本，是在OBS经典版的基础上重构实现的，使用了更好的模块设计，提高了性能，同时支持DirectX和OpenGL渲染，还...

通过企业证书打包App一般分为以下几步：1、Certificates 手动生成一个证书2、 Identifiers App IDs 注册应用程序ID3、Provisioning Profiles 配置概要文件4、Xcode选择打包证书5、开始打包一、进入开发者中心进入开发者中心，登陆自己的账号，https://developer.apple.com/1、点击“Account”进入登陆界面2、输入自己的开发账号和密码点击“登陆”3、选择Certificates,Identifiers

1、音视频领域固有门槛深刻理解音视频编码格式 H.264 和 AAC 的编码细节；混音时如何将两个音频调整到一致的参数，使用什么样的算法去混合等等。2、图形图像、OpenGL 处理摄像头预览数据，图像处理，音视频编解码都需要了解 RGB 和 YUV 色彩空间的数据格式，以及它们之间转换的方式等等；其中部分操作可以利用更高效的 OpenGL 去完成，如美颜滤镜，图层混合，放大/缩小，旋转，还有图像裁剪等等。3、平台相关要对相应平台的摄像头、麦克风、编解码、多媒体处理等 API 十分熟...

在iOS里，我们经常能看到 CVPixelBufferRef 这个类型，在Camera 采集返回的数据里得到一个CMSampleBufferRef，而每个CMSampleBufferRef里则包含一个 CVPixelBufferRef，在视频硬解码的返回数据里也是一个 CVPixelBufferRef（里面包好了所有的压缩的图片信息）。CVPixelBufferRef：是一种像素图片类型，由于CV开头，所以它是属于 CoreVideo 模块的。iOS 对象命名前面用缩写表示它属于的模块，如： CF

一、Cmake 简介cmake 是一个跨平台、开源的构建系统。它是一个集软件构建、测试、打包于一身的软件。它使用与平台和编译器独立的配置文件来对软件编译过程进行控制。二、常用命令1. 指定 cmake 的最小版本cmake_minimum_required(VERSION 3.4.1)这行命令是可选的，我们可以不写这句话，但在有些情况下，如果 CMakeLists.txt 文件中使用了一些高版本 cmake 特有的一些命令的时候，就需要加上这样一行，提醒用户升级到该版本之后再执行 cma

MAVLink是为微型飞行器MAV（Micro Air Vehicle）设计的（LGPL）开源的通讯协议。是无人飞行器和地面站（Ground Control Station ，GCS）之间，以及无人飞行器之间通讯常用的协议。APM、PIXHAWK飞控，Mission Planner、QGroundControl地面站均使用了MAVLink协议进行通讯。MAVLink源码下载地址（现已更新至v2.0）：https://github.com/mavlink/qgroundcontrol　 用户手册：ht

git 的submodule 工具方便第三方库的管理，比如gitlab 上的各种开源工具，spdlog等在项目目录下创建.gitmodule 里可以添加第三方库，然后在更新第三方库时，有两个选项git submodule update --init 这是更新当前主项目上记录的submodule 的commitid比如在提交子项目的时候，会在主项目产生变更，这个变更随着主项目一起的提交，也就是一一对应Subproject commit 7d67b54340cebb4ffaa283ebf6975406f

macOS 下 cmake 总是使用 clang 作为编译器，有时会导致代码编译不过。使用下面指令可以指定使用 gcc 编译器。cmake -DCMAKE_C_COMPILER=/usr/bin/gcc -DCMAKE_CXX_COMPILER=/usr/bin/g++ ..Cmake 编译PowerSDK项目，结果报如下错误:-- The C compiler identification is unknown-- The CXX compiler identification is un

下载并安装CMake从CMake官网下载下载dmg文件并安装我下载的是最新版本：配置命令行安装完成后打开程序：在菜单栏Tools选项里选择How to install For Command Line Use按照说明配置环境变量即可任选一中:这里选择第二种安装方式：在命令行里输入 cmake 就可以看到相关提示:命令行中输入cmake --version反馈结果类似如下:证明配置成功了。...

下载并安装CMake从CMake官网下载下载dmg文件并安装我这里下载的是10.13最新版本：配置命令行安装完成后打开程序：在菜单栏Tools选项里选择How to install For Command Line Use按照说明配置环境变量即可任选一中：这里选择第二种安装方式：在命令行里输入 cmake 就可以看到相关提示：命令行中输入cmake --version反馈结果类似如下：证明配置成功了。...

git 的submodule 工具方便第三方库的管理，比如gitlab 上的各种开源工具，spdlog等在项目目录下创建.gitmodule 里可以添加第三方库，然后在更新第三方库时，有两个选项。git submodule update --init 这是更新当前主项目上记录的submodule 的commitid比如在提交子项目的时候，会在主项目产生变更，这个变更随着主项目一起的提交，也就是一一对应。Subproject commit 7d67b54340cebb4ffaa283ebf69

1、什么是HDR视频？高动态范围视频（High-dynamic-range video，简称HDR video或HDR视频），是一种动态范围大于标准动态范围视频（Standard-dynamic-range video，简称SDR video或SDR视频）的视频，SDR视频使用的是传统的伽马曲线。HDR视频技术的特点：(1).对比度和色域电视（或电脑显示器）最重要的两个因素是对比度（或者叫做电视的亮度和暗度），以及色彩的准确性（或者叫色域）。CNET、几乎所有其他电视评测人员、影像科学基金会

目前网络上有很多抓包工具，但个人认为好的就那么几款，我一直在使用的Wireshark就是其中比较好用的一款。Wireshark是当今世界最流行的网络协议嗅探、抓包和分析工具，它使我们得以窥探网络上流动的数据及其协议细节，支持Windows、Mac上使用。下载Mac版本的Wireshark安装包：安装完以后，打开Wireshark：点击鲨鱼头按钮，开始抓包，报如下错误：wireshark选择网卡出错解决方法：打开终端输入命令：sudo chmod 777 /dev.

1.RTP包头的封装打包时，每帧数据包均需要添加二中所述RTP包头，对于每路视频流，RTP包头除序列号外，基本保持不变；另一个要注意的时，由于包头需要按位填充，当填充/发送数据时，应注意发送端数据的大小端限制。2.数据流的包头此处以h264，h265，aac，g711来举例说明，g711数据在发送时，不需要额外的头部信息，其他三种数据流，在rtp包头后，应按格式封装自己的数据头，其中h264为一个字节，h265为两个字节，aac数据为四个字节。H264打包：视频包时需要考虑到MTU的大小，

在我们的高清视频传输中，一般都需要对视频信息进行指定协议的打包，RTP是比较常用的一种视频打包负载传输方式，那么具体是怎么打包的呢？今天就简单介绍一下。1.H265的结构 在H265中，每一个前缀码00000001后面跟随的前两个字节为NALU的语法元素，总体结构如下: 这两个字节字段分布如下，F(forbidden_zero_bit)通常为0，LayId(nuh_layer_id)通常为0，Tid(nuh_temporal_id_plus1)通...

1、概念和定义区别SDR (Standard Dynamic Range), 标准动态范围HDR (High Dynamic Range), 高动态范围通俗地讲就是8位和10位的区别(不够准确的说法，但是可以很方便地看出两者的区别)。标准动态范围目前多指 8bit 视频，动态范围是0-255，高动态范围目前多指 10bit 视频，动态范围是 0-1023。用灰度图像举例，标准动态从黑到白分成 256 份，高动态分成1024份。高动态明显分得更细致，带来的视觉体验就是色彩更丰富，细节更清晰。

https://www.jianshu.com/p/44a5b59e7e85

+initialize和+load这两个方法在类使用时会自动调用。但是两个方法的不同点会导致应用层面上性能的显著差异。1.+initialize方法： 这个方法会在第一次初始化这个类之前被调用，我们一般用来初始化静态变量。 + initialize方法类似一个懒加载，如果没有使用这个类，那么系统默认不会去调用这个方法，且默认只加载一次； + initialize方法的调用看起来会更合理，通常在它里面写代码比在+ load里...

UIScrollView有自己默认的滚动条，可设置隐藏和显示，但是有时候这个默认的滚动条没办法满足我们的需求，那这时候只能通过自定义来实现了。 实现自定义滚动条需要解决的主要问题是： 在scrollview滚动的过程中如何改变滚动条的位置，进而确保滚动条和scrollView在相同时间内走完自己的位移，只要把这个问题解决好了，那我们就可以优雅的自定义滚动条了。-(void)scrollViewDidScroll:(UIScrollView *)scrollView{ [UIView...

pthread的使用：1.pthread pthread 是一套通用的多线程的 API，可以在Unix / Linux / Windows 等系统跨平台使用，使用 C 语言编写，需要程序员自己管理线程的生命周期，使用难度较大，在C++开发中比较常用，但是在 iOS 开发中几乎不使用 pthread。实现 POSIX 线程标准的库常被称作 Pthreads，一般用于 Unix-like POSIX 系统，如 Linux、Solaris。但是 Microsoft Windows 上的实现也...

Elecard StreamEye Tools是一款分析视音频的好工具。比较常用的是:Elecard Stream AnalyzerElecard StreamEyeElecard YUV Viewer可以查看视频详细信息：视频帧的2进制信息：

在 iOS 中有双缓存机制，有前帧缓存、后帧缓存，这样渲染的效率很高。屏幕成像原理我们所看到的动态的屏幕的成像其实和视频一样也是一帧一帧组成的。为了把显示器的显示过程和系统的视频控制器进行同步，显示器（或者其他硬件）会用硬件时钟产生一系列的定时信号。当电子枪换到新的一行，准备进行扫描时，显示器会发出一个水平同步信号（Horizonal Synchronization），简称 HSync；而当一帧画面绘制完成后，电子枪回复到原位，准备画下一帧前，显示器会发出一个垂直同步信号（Vertical Sync

音视频分离：从视频源分离视音频：1.分离音频ffmpeg -i NORM0001.mp4 -vn -y -acodec copy test.aacffmpeg -i NORM0001.mp4 -vn -y -acodec copy test.m4a2.分离视频ffmpeg -i 1.mkv -vcodec copy –an test.mp4查看音视频文件信息命令ffmpeg -i NORM001.mp4ffmpeg -i test.aacffmpeg -i t..

一、基本概念1、文件，由许多Box和FullBox组成。2、Box，每个Box由Header和Data组成。3、FullBox，是Box的扩展，Box结构的基础上在Header中增加8bits version和24bits flags。4、Header，包含了整个Box的长度size和类型type。当size==0时，代表这是文件中最后一个Box；当size==1时，意 味着Box长度需要更多bits来描述，在后面会定义一个64bits的largesize描述Box的长度；当type...

1.什么是Runloop runloop是用来处理事件的循环。NSRunloop是CFRunloop的封装，CFRunloop是一套C接口。2.Runloop的作用保持程序持续运行,程序一启动就会开一个主线程，主线程一开起来就会跑一个主线程对应的RunLoop,RunLoop保证主线程不会被销毁，也就保证了程序的持续运行 处理App中的各种事件(比如：触摸事件，定时器事件，Selector事件等） 节省CPU资源，提高程序性能，程序运行起来时，当什么操作都没有做的时候，RunLoop...

https://www.jianshu.com/p/4b1d77054b35https://blog.csdn.net/aiyang10/article/details/49486705

音视频在现在的社会中无处不在，视频直播已经成为大家生活或娱乐的必需品了，那么音视频卡顿给我们的体验会造成影响，那么造成音视频卡顿的原因都有哪些昵？一、设备原因 此处设备主要是指用户端的软硬件配置。在直播的传输过程中，会对视频进行编解码，高清视频往往会给硬件带来解码压力，由于解码造成的卡顿尤为明显。如果手机/电脑硬件配置低，或播放软件版本过低 ，编解码的速度就会降低，就可能造成视频播放卡顿的情况。解决方案：(1).提高直播软件的兼容性和容错率，升级硬件和软件设备，或...

1.什么是音视频同步？ 音视频同步顾名思义就是视频画面与音频能够对应起来，尤其是对于视频画面中能看到声源动作（如：嘴型）的场景，音视频同步问题非常影响体验。 在视频源采集端作为音视频的生产者，如果采集端产生的音视频源本身就无法保证同步，那么后面不管经过什么处理，都很难再让用户看到音视频同步的画面了，因此，在采集端保证音视频同步上尤其重要。2.音视频同步原理 音视频采集的数据分别来自于麦克风与摄像头，而摄像头与麦克风其实是两个独立的硬件，而音...

在iOS多线程中，使用锁是保证线程访问安全的重要手段，而且iOS中给我们提供了很多非常好使用的锁，看之前，先说说关于锁的一些名词吧。原子：同一时间只允许一个线程访问临界区：指的是一块对公共资源进行访问的代码，并非一种机制或是算法。自旋锁：是用于多线程同步的一种锁，线程反复检查锁变量是否可用。由于线程在这一过程中保持执行，因此是一种忙等待。一旦获取了自旋锁，线程会一直保持该锁，直至显式释放自旋锁。 自旋锁避免了进程上下文的调度开销，因此对于线程只会阻塞很短时间的场合是有效的。互斥锁

1、什么是视频码率？ 视频码率是视频数据（视频色彩量、亮度量、像素量）每秒输出的位数。一般用的单位是kbps。2、设置视频码率的必要性 在视频会议应用中，视频质量和网络带宽占用是矛盾的，通常情况下视频流占用的带宽越高则视频质量也越高；如要求高质量的视频效果，那么需要的网络带宽也越大；解决这一矛盾的钥匙当然是视频编解码技术。评判一种视频编解码技术的优劣，是比较在相同的带宽条件下，哪个视频质量更好；在相同的视频质量条件下，哪个占用的网络带宽更少。 是...

xcode11创建项目新增SceneDelegate文件，AppDelegate文件结构也发生变化，在AppDelegate.h文件中没有了window属性，而是在SceneDelegate.h中，可见AppDelegate不管理window而是交给SceneDelegate。由于这些是ios13新增，所以SceneDelegate在ios13以下的系统是不支持。所以xcode11创建的项目如要做一下处理： 如果App不需要支持多个scene，同时兼容ios13以下，可...

1.应用程序生命周期（AppDelegate）(1.点击应用程序图标(2.程序入口：进入Main函数(3.通过UIApplicationMain函数(4.初始化UIApplication对象并且设置代理对象AppDelegate(5.程序完成加载：[AppDelegate application:didFinishLaunchingWithOptions:](6.创建Window窗口：UIWindow(7.程序被激活：[AppDelegate applicationDidBeco

iOS 和C++一样，都有深拷贝和浅拷贝，其实本质上是一样的，浅拷贝是指地址的拷贝，而深拷贝是内容的拷贝。iOS中常见的深拷贝和浅拷贝如下图所示：

一、分类（Category）1、分类的作用？声明私有方法，分解体积大的类文件2、分类的特点？可以为系统类添加分类。在运行时时期，将 Category 中的实例方法列表、协议列表、属性列表添加到主类中后（所有Category中的方法在方法列表中的位置是在主类的同名方法之前的），然后会递归调用所有类的 load 方法，这一切都是在main函数之前执行的。3、分类可以添加哪些内容？实例方法，类方法，属性（添加getter和setter方法，并没有实例变量，添加实例变量需要用关联对象）4

1.plist属性列表适用对象：仅仅是Foundation框架中自带的一些类，比如NSString、、NSArray、NSDictionary、NSSet、NSNumber、NSData调用对象的writeToFile...方法就可以写入文件调用对象的...WithContentsOfFile方法就可以从文件中读取对象内容2.偏好设置(NSUserDefault)本质还是plist属性列表的方式进行存储存取非常简单(不关心文件夹和文件名)缺点：只能存储到一个文件中（不能存放大批量数

一、信号量的简单介绍：1.信号量：信号量(Semaphore)，有时被称为信号灯，是在多线程环境下使用的一种设施，是可以用来保证两个或多个关键代码段不被并发调用。在进入一个关键代码段之前，线程必须获取一个信号量；一旦该关键代码段完成了，那么该线程必须释放信号量。其它想进入该关键代码段的线程必须等待直到第一个线程释放信号量。为了完成这个过程，需要创建一个信号量VI，然后将Acquire Semaphore VI以及Release Semaphore VI分别放置在每个关键代码段的首末端。确认这些信号量

C++11 增加了线程以及线程相关的类, 而之前并没有对并发编程提供语言级别的支持，使用 std::thread 类来创建线程, 我们需要提供的只是线程函数, 或者线程对象, 同时提供必要的参数std::thread 表示单个执行的线程, 使用thread 类首先会构造一个线程对象, 然后开始执行线程函数#include <iostream>#include <thread> //需要包含的头using namespace std;void func(int a, d

oc中利用协议代理解耦delegate是OC中常用传值模式，这是一种很好的设计模式。但是日常开发中仅限于传值，不能充分发挥它的价值。其本质是将接口与实现分离，下面是一种利用协议实现模块解耦的思路。...

iOS中如何判断5G网络呢？Xcode12.1中CTRadioAccessTechnologyNRNSA和CTRadioAccessTechnologyNRNR是New Radio的缩写，新无线（5G）的意思，NRNSA表示5G NR的非独立网(NSA )模式：https://zh.wikipedia.org/wiki/5G%E6%96%B0%E6%97%A0%E7%BA%BF使用了Reachability进行网络判断：+ (NSString *)networkStatus{ Re

了解音频编码之前，先了解一下常用的音频格式： PCM(Pulse Code Modulation，脉冲编码调制)音频数据是未经压缩的音频采样数据裸流，它是由模拟信号经过采样、量化、编码转换成的标准数字音频数据。描述PCM数据的6个参数：(1).Sample Rate : 采样频率。8kHz(电话)、44.1kHz(CD)、48kHz(DVD)。(2).Sample Size : 量化位数。通常该值为16-bit。(3).Number of Channels : 通道...

直播丢包问题是流媒体中一直关注的重要问题，如何解决直播的丢包问题呢？先从直播流程入手： 一般直播流程大体上：采集→前处理→编码→推流→分发→拉流→解码→播放。引起直播的丢包延迟的主要原因有两种：1.网络波动 网络波动就是说在排序好的数据包中，有任何一包被延迟，就会导致它不按照正确的抵达顺序到达用户端，自然也无法按照接受顺序把内容播放出来，呈现在用户的接收屏上。网路波动会导致网络的内容播放的延迟和直播卡顿，但是这个原因只能算作是直播延时的外部因素，与本身的...

有时候，我们在提交代码的时候，会出现冲突，无法提交的情况，如何在保证正确版本的情况下，对代码进行恢复呢？jackdeMacBook-Pro:maincodejack$ git reset --hard HEADHEAD is now at 9be9da64 创建maincode分支对于恢复修改的文件，就是将文件从仓库中拉到本地工作区，即 仓库区 ----> 暂存区 ----> 工作区。对于修改的文件有两种情况：只是修改了文件，没有任何 git 操作 ...

C++ STL 之所以得到广泛的赞誉，也被很多人使用，不只是提供了像vector, string, list等方便的容器，更重要的是STL封装了许多复杂的数据结构算法和大量常用数据结构操作。vector封装数组，list封装了链表，map和set封装了二叉树等，在封装这些数据结构的时候，STL按照程序员的使用习惯，以成员函数方式提供的常用操作，如：插入、排序、删除、查找等。让用户在STL使用过程中，并不会感到陌生。 今天我们说说STL的set，必须说明的是set关联式容...

1.STL Queue使用简介 C++ STL 之所以得到广泛使用，不只是提供了像vector, string, list等方便的容器，更重要的是STL封装了许多复杂的数据结构算法和大量常用数据结构操作。vector封装数组，list封装了链表，map和set封装了二叉树等，在封装这些数据结构的时候，STL按照程序员的使用习惯，以成员函数方式提供的常用操作，如：插入、排序、删除、查找等。让用户在STL使用过程中，并不会感到陌生。 今天我们说说STL的Queue，Queu...

1.RTSP协议简介 RTSP（Real Time Streaming Protocol，实时流协议），是由Real Network和Netscape共同提出的如何有效地在IP网络上传输流媒体数据的应用层协议。RTSP提供一种可扩展的框架，能够提供可控制的，按需 传输的实时数据，比如音频和视频文件。源数据可以包括现场数据的反馈和存储的文件。RTSP对流媒体提供了诸如暂停，快进等控制，而它本身并不传输数据，RTSP的作用相当于流媒体服务器的远程控制。 服务器端可以自行选择...

1.OPTION目的是得到服务器提供的可用方法:OPTIONS rtsp://192.168.20.136:5000/xxx666 RTSP/1.0CSeq: 1 //每个消息都有序号来标记，第一个包通常是option请求消息User-Agent: VLC media player (LIVE555 Streaming Media v2005.11.10)服务器的回应信息包括提供的一些方法,例如:RTSP/1.0 200 OKServer: UServer 0.9...

目前常见的网络测速方案只有两种：方案1：通过上传和下载数据包，使用 TotalSize / TotalTime 来计算真实的上传和下载速率是多少这个时候是真实的在下载或上传数据，比较充分的利用了当前的带宽，计算的网速也比较接近真实的网速值。但是蜂窝网络下，会消耗用户的少量流量，结果比较准确。方案2：通过读取网卡数据来计算，读取上一秒的整体流量消耗 T1，然后读取当前的流量消耗 T2，那么 T2 - T1 其实可以表示为当前的一个网速情况。同时这个流量数据是可以区分蜂窝网络、Wi-Fi的，也可

RTSP、RTMP、HTTP、SIP协议是常见的几种音视频解决方案传输协议。(1)、RTMP协议RTMP是Real Time Messaging Protocol(实时消息传输协议)的首字母缩写。该协议基于TCP，是一个协议族，包括RTMP基本协议及RTMPT/RTMPS/RTMPE等多种变种。RTMP是一种设计用来进行实时数据通信的网络协议，主要用来在Flash/AIR平台和支持RTMP协议的流媒体/交互服务器之间进行音视频和数据通信。支持该协议的软件包括Adobe Media Server/Ul

流媒体是一个技术体系，它是网络技术与音视频多媒体技术有机结合的产物。它是发送方和接收方之间传送多媒体流数据的技术。1994年，美国一家叫做progressive networks的公司最先开始推出这种流数据技术。他们首先推出了C/S架构的音频接收系统real audio，并随后发布了流数据播放器realplayer系列。机会出现之后，微软很快推出了自己的流数据技术方案。流媒体数据技术就这样开始了快速演进。然而，受限于网络带宽，这项技术并没有迅速普及，随着网络带宽迅速提升，这种流数据技术悄悄地在教育、广电

视频格式(MP4/RMVB/MKV/AVI )等，这些视频格式与编码压缩标准 mpeg4、H.264、H.265 等有什么关系？ 了解之前，先看看视频相关的3个概念，视频文件格式（简称：文件格式），视频封装格式（简称：视频格式），视频编码方式（简称：视频编码）。1、视频文件格式（简称：文件格式） 我们知道Windows系统中的文件名都有后缀，例如A.doc，A.wps，A.pdf等等。Windows设置后缀名的目的是让系统中的应用程序来识别并关联这些文件，让相应的文件由...

Sonic Visualiser For Mac(音频数据分析) V3.3 苹果电脑版https://www.jb51.net/softs/406260.html#downintro2Sonic Visualiser for Mac是一款方便易用的音频数据分析工具。该软件有着强大的音频数据注解功能，帮助用户描述你的发现功能，并能够自动运行，在新的诠释分析插件格式;软件功能：1、加载音频文件以WAV，OGG和MP3格式，并查看他们的波形。2、查看音线谱见，如音频视觉效果，显示参数的互动与.

如何把视频文件中的音频数据提取出来，网络上有不少音频提取工具，但作为技术人员提到音视频处理，肯定会想到FFmpeg。本文介绍了如何基于FFmpeg从视频中提取音频，然后将音频保存为mp3格式的音频文件。1.执行音频提取root@jackfan: ~$ ffmpeg -i test.mp4 -f mp3 -vn test.mp3参数解释：-i 表示input，即输入文件-f 表示format，即输出格式-vn表示vedio not，即输出不包含视频对比源视频文件和提取得到的音频文件

音频处理相关内容如下：1、物理声音3要素音调（Pitch）就是我们对声音高低的感觉，它主要与声波的频率有关，声波的频率高，则音调也高；音量，也叫响度，就是声音强弱，单位是分贝（dB），像你的分贝就很高，挺吵的，它和声波振动的幅度有关，一般说来，声波振动幅度越大响度也越大；音色，可以理解为声音的特色，就是我们人耳对各种频率、各种强度的声波的综合反应，它取决于材质，比如说每个人不用的声音就是你的音色。2、音频的量化过程 信号有数字信号和模拟信号，就音...

1.对直播域名解析的优化 一般来说，大部分直播系统域名解析最低可以做到15ms左右。但由于直播场景的特殊性，推流和播放使用的域名使用的热度较难达到ISP NS缓存的标准，所以经常需要走回Root NS进行查询的路径。客户端解析优化的原理就出来了：本机缓存域名的解析结果，对域名进行预解析，每次需要直播推流和播放的时候不再需要再进行DNS过程。此处节省几十到几百毫秒的打开延迟。2.对音视频播放的优化 直播播放器的相关技术点有：直播延时、首屏时间（指从开始播放到第一...

在iOS平台上，所有的音频框架底层都是基于AudioUnit实现的，较高层次的音频框架包括: Media Player、 AV Foundation、OpenAL和Audio Toolbox，这些框架都封装了AudioUnit，然后提供了更高层次的API(功能更少，职责更单一的接口)。当开发者在开发音视频相关产品的时候，如果对音视频需要更高程度的控制、性能以及灵活性，或者想要使用一些特殊功能(回声消除)的时候，可以直接使用AudioUnit API。苹果官方文档中描述，AudioUni.

在对实时音视频的质量进行测试时，通常可以关注以下几个指标：1，流畅度主要受帧率（FPS）的影响。帧率：画面每秒传输的帧数，每秒钟显示的帧数愈多，所显示的动作就越流程。2，清晰度单位面积的画面所承载的信息。当帧率和分辨率固定时，主要受码率的影响码率：比特率，每秒传送的比特数。3，分辨率对视频大小和画质有着非常重要的影响。如果清晰度和流畅度不变，分辨率与视频画质成正相关，同等分辨率下，显示屏幕越大，主观感受越差。4，延时如果要满足比较流畅地进行实时互动，那么单向的端到

一、计算公式基本的算法是：码率（kbps）＝文件大小（KB）＊8／时间（秒），举例，D5碟，容量4．3G，其中考虑到音频的不同格式，算为600M，（故剩余容量为4．3＊1024－600＝3803．2M），所以视频文件应不大于3．7G。如视频文件的容量为3．446G，视频长度100分钟（6000秒），计算结果：码率约等于4818kbps（3．446＊1024＊1024＊8／6000＝4817．857）。二、码率几点原则1、码率和质量成正比，但是文件体积也和码率成正比。2、码率超过一定数值，

通过线程的依赖关系实现线程同步:1、组队列(dispatch_group_t) 举一个例子：用户下载一个视频，视频很大，需要分成很多份进行下载，使用GCD应该如何实现？使用什么队列？ 使用Dispatch Group追加block到Global Group Queue，这些block如果全部执行完毕，就会执行通过dispatch_group_notify添加到主队列中的block，进行视频的合并处理。dispatch_queue_t queue = dispa...

在偶然调试APP直播的时候，在iOS 13系统上发现当处于播放视频状态的时候，退出直播，会出现APP闪退。 但与平常闪退情况不同的是，链接编译器调试的时候，编译器不会捕捉到相关的crash信息，编译器与手机的链接会直接中断。 编译器只给出 Message from debugger: Terminated due to signal 13 这个错误信息。接下来就只有顺着signal 13信号这个线索进行研究。 简单来讲就是管道破裂。管道破裂，这个信号通常在...

1、YUV简介YUV格式有两大类：planar和packed。 对于planar的YUV格式，先连续存储所有像素点的Y，紧接着存储所有像素点的U，随后是所有像素点的V。 对于packed的YUV格式，每个像素点的Y,U,V是连续交*存储的。 YUV，分为三个分量，“Y”表示明亮度（Luminance或Luma），也就是灰度值；而“U”和“V” 表示的则是色度（Chrominance或Chroma），作用是描述影像色彩及饱和度，用于指定像素的颜色...

FFmpeg sws_scale()函数主要用来做视频像素格式和分辨率的转换。其函数定义如下： int sws_scale(struct SwsContext *c, const uint8_t *const srcSlice[], const int srcStride[], int srcSliceY, int srcSliceH, uint8_t *const dst[], const int dstStride[]...

说说项目中遇到的两点失误：1. AVFrame结构，av_frame_alloc申请内存，av_frame_free释放内存。容易混淆的是av_frame_unref，它的作用是释放音视频数据资源，而av_frame_free是释放所有资源，包括音视频数据资源和结构体本身的内存。可以从源码中看到，av_frame_free函数体内是先调用了av_frame_unref释放数据缓存，再free本身结构体内存。2. AVPacket结构，比较神奇的是，av_read_frame执行过程中，内部为形参pk

音视频的直播系统是一个复杂的工程系统，要做到非常低延迟的直播，需要复杂的系统工程优化和对各组件非常熟悉的掌握。下面整理几个简单常用的调优技巧： 音视频同步本身比较难，一般使用ijkplayer 第三方做音视频同步。不排除有视频直播 视频通话需要用音视频同步，可以从三种 音频为准 视频为准 自定义时钟为准三种方式实现音视频同步。以fflay来看音视频同步流程 ffplay中将视频同步到音频的主要方案是，如果视频播放过快，则重复播放上一帧，以等待音频；如果视频...

在视频直播中，为了提高视频编码效率，可以对数据进行适当的转换，再送编码器，iOS对NV12的数据编码效率最高，以下是YUV420P互转NV12，NV21的简单算法。1.YUV420P转NV12void YUV420PtoNV12(unsigned char *Src, unsigned char* Dst,int Width,int Height){unsigned char* SrcU = Src + Width * Height;unsigned char* SrcV...

在我们的音视频直播中，一般都需要做规范化处理，保证更多机器的兼容性和直播效果。对于音频来说，做的最多的就是重采样了。那么怎么对音频进行重采样呢，一般来说，最常用的就两种，一种是使用现成的库，如FFmpeg，opus，webrtc , sox等。另外一种就是使用差值采样算法，音频重采样其实也就是插值算法。与图像方面的插值算法没有太大的区别。1.使用FFmpeg进行音频重采样FFmpeg解码音频数据时，进行重采样（即改变文件原有的采样率），我们使用ffmpeg解码音频的时候，往往需要...

一、音视频数据编码同步合成FLV流 原始的音视频数据无法直接在网络上传输,推流需要编码后的音视频数据以合成的视频流,如flv, mov, asf流等,根据接收方需要的格式进行合成并传输,这就需要对音视频做同步，保证正确播放。 一般合成步骤如下图1-1所示： 图 1-1 音视频同步流程 对于iOS而言,我们可以...

1、FLV格式数据封装 FLV (Flash Vedio )是一种视频流媒体格式，FLV是被众多新一代视频分享网站所采用，是目前增长最快、最为广泛的视频传播格式。是在sorenson公司的压缩算法的基础上开发出来的。FLV格式不仅可以轻松的导入Flash中，速度极快，并且能起到保护版权的作用，并且可以不通过本地的微软或者REAL播放器播放视频。2、FLV文件结构 FLV里面是由多个Tag构成的：[[tag1][tag2][tag3][tag4]…] ...

一、iOS视频编码及推流实现细节（1）将视频流变成yuvdata数据-(NSData*) convertVideoSmapleBufferToYuvData:(CMSampleBufferRef) videoSample{//获取yuv数据//通过CMSampleBufferGetImageBuffer方法，获得CVImageBufferRef。//这里面就包含了yuv420数据的指针CVImageBufferRefpixelBuffer =CMSampleBufferGetImag

直播推流需要的三方库和一些常用格式和协议介绍1.rtmp协议 ：实时消息传输协议,Adobe Systems公司为Flash播放器和服务器之间音频、视频和数据传输开发的开 放协议，因为是开放协议所以都可以使用了。RTMP协议用于对象、视频、音频的传输。这个协议建立在TCP协议或者轮询HTTP协议之上。RTMP协议就像一个用来装数据包的容器，这些数据可以是FLV中的视音频数据。一个单一的连接可以通过不同的通道传输多路网络流，这些通道中的包都是按照固定大小的包传输的2.nginx:免费开源web服务器.

使用自动布局实现不同屏幕尺寸的适配。添加自动布局约束（下文简称约束）有以下几种方式：使用Xcode的Interface Builder界面设计器添加并设置约束 通过系统原生的NSLayoutConstraint逐条添加约束 通过可视化格式语言VFL添加约束 使用第三方类库（如Masonry）添加约束 本文章将以一个简单的例子来演示如何使用这几种方式添加约束，如下图所示。程序的界面主要由三部分组成，最上面是一张苹果logo图片，下面是可以滚动的区域，包含公司名称和详细介绍。竖屏：...

iOS系统中的自动布局（Auto Layout）一、视图定位的基本原理 视图（View）是一个用于显示内容的矩形区域，它是构成App界面的最基本单元。下图为计算器App的横屏界面，其中每一个计算器按键都是一个视图。在平面直角坐标系中，要准确描述一个矩形需要确定以下四个布局属性（Layout Attribute），即水平位置x、垂直位置y、宽度w、高度h。只有上述4个布局属性都确定的情况下，该视图才能正确显示在界面中。以上图为例，如果要将数字键5添加到界面中，则代码类...

一、NSString与int和float的相互转换NSString *tempA = @"123";NSString *tempB = @"456";　1.字符串拼接NSString *newString = [NSString stringWithFormat:@"%@%@",tempA,tempB];　2.字符转int　　int intString = [newString intValue];　3.int转字符　　NSString *stringInt = .

AVCDecoderConfigurationRecord即AVC Sequence Header。 对于H.264/AVC编码格式的FLV文件，onMetaData是第一个Tag，之后的第二个Tag就是AVCDecoderConfigurationRecord, 也是第一个Video Tag， 在FLV文件中一般情况也是出现1次。**AVCDecoderConfigurationRecord in ISO/IEC 14496-15:2004(E)**AVCDecoderCo...

Object C 与 C++ 混编的时候，是不能用Cocoa 自带的委托机制来实现回调的。比如在做一些多平台的项目时，由于接口是c++编写的，这个时候你要怎么样去将接口函数里的数据传递到你Object C编写的对象中去呢。最简单的方法就是使用ios消息机制-Notification，来传递从接口收到的数据。但是接口过多，注册太多Notifications，就会导致程序的开销很大。这个时候，选择函数指针实现回调，既可以实现功能，又可以减少系统开销。 例子：CallBac...

1、什么是大小端？ 计算机体系结构中，对于字节、字等的存储机制有所不同，因而引发了计算机 通信领 域中一个很重要的问题，即通信双方交流的信息单元（比特、字节、字、双字等等）应该以什么样的顺序进行传送。如果不达成一致的规则，通信双方将无法进行正 确的编/译码从而导致通信失败。计算机中通常采用的字节存储机制主要有两种：Big-Endian和Little-Endian。不同的计算机之间的协议交互使用的协议字节序也可能不同，这就需要一个大小端转换的问题。2、字节序 字节序...

1. NSString转化为UNICODE String：(NSString*)fname ＝ @“Test”;char fnameStr[10];memcpy(fnameStr, [fname cStringUsingEncoding:NSUnicodeStringEncoding], 2*([fname length]));与strcpy相比，memcpy并不是遇到'\0'就结束，而是一定会拷贝完n个字节2. NSString 转化为 char *NSString * str＝

1.xib创建控制器，先创建自定义控制器类，然后指定xib文件,修改xib文件中的File's Owner的custom class，设置为你自定义的控制器类.self.window=[[UIWindow alloc]initWithFrame:[UIScreen mainScreen].bounds]; XibViewController * xibVc=[[XibViewController alloc]initWithNibName:@"ZXib" bundle:nil]; self.window

Linux线程同步，通常都是使用锁来完成。posix下抽象了一个锁类型的结构：ptread_mutex_t。通过对该结构的操作，来判断资源是否可以访问。顾名思义，加锁(lock)后，别人就无法打开，只有当锁没有关闭(unlock)的时候才能访问资源。 对象互斥锁的概念，来保证共享数据操作的完整性。每个对象都对应于一个可称为" 互斥锁" 的标记，这个标记用来保证在任一时刻，只能有一个线程访问该对象。 使用互斥锁（互斥）可以使线程按顺序执行。通常，互斥锁通过确保...

在面向对象objective-C语言中，当一个类使用到另一个类时，并且在类的头文件中需要创建被引用的指针时，可以#import方式引入，通过@class引入；#import和@class区别：1、运用#import方式：会包含被引用类的所有信息，包括被引用类的变量和方法； 运用@class方式：告诉编译器只是类的声明，具体这个类里有什么信息，如何定义的，这里不需要知道，等实现文件中真正要用到时，才会真正去查看被引用类中的信息（属性，方法）；2、在头文件中， 一般只需要知道...

在iOS开发过程中，有很多调试方法，例如： 断点调试（普通断点、条件断点、全局断点）之外，NSLog是我们调试最常用的方法常用的NSlog打印各种字符数据：NSLog(@"打印字符串：%@",name);NSLog(@"打印整形：%i",number);//或者 %li ; %ld ; %dNSLog(@"打印字符：%c",c);NSLog(@"打印单浮点数：%f",f);NSLog(@"打印精度浮点数：%.2f",f);NSLog(@"BOOL--b...