iOS 实现语音边录边传

主要流程

  1. 开始录音,与服务器建立流上传连接
  2. 录音期间,将分块数据传输到服务器
  3. 录音结束并且所有数据传输完毕,关闭流连接
  4. 处理服务器返回的数据

与服务器建立连接

用户开始录音时,建立流上传连接任务.在session调用uploadTaskWithStreamedRequest:后,系统会调用URLSession:task:needNewBodyStream: 代理方法获取输入流(HTTPBodyStream),通过输入流就可以向服务器上传分块数据

NSURLSessionConfiguration *config = [NSURLSessionConfiguration defaultSessionConfiguration];
NSURLSession *session = [NSURLSession sessionWithConfiguration:config];

// 实例化 request
NSURL *r_url = [NSURL URLWithString:@"http://www.example.com"];
NSMutableURLRequest *request = [NSMutableURLRequest requestWithURL:r_url];
request.HTTPMethod = @"POST";

// 创建上传任务
NSURLSessionUploadTask *uploadTask = [session uploadTaskWithStreamedRequest:request];
    
// 任务执行
[uploadTask resume];
复制代码

实现代理方法,传入输入流给session 建立输入流的方式有两种:

  • 调用NSStream类方法getBoundStreamsWithBufferSize:inputStream:outputStream:得到两个绑定的流对象输入流(inputStream)和输出流(outputStream),当输出流写入数据的时候系统内部会将数据传递给输入流.
  • 子类化NSInputStream(文后链接有介绍这种方法,原文作者推荐第一种方法,本文不重点讲解)
- (void)URLSession:(NSURLSession *)session task:(NSURLSessionTask *)task needNewBodyStream:(void (^)(NSInputStream * _Nullable))completionHandler
{
    NSInputStream *inputStream = nil;
    NSOutputStream *outputStream = nil;
    [NSStream getBoundStreamsWithBufferSize:1024 inputStream:&inputStream outputStream:&outputStream];
    self.bodyStream = inputStream;
    self.outputStream = outputStream;
    self.outputStream.delegate = self;
    [self.outputStream scheduleInRunLoop:[NSRunLoop currentRunLoop] forMode:NSDefaultRunLoopMode];
    [self.outputStream open];
    completionHandler(self.bodyStream);
}
复制代码

数据分块上传到服务器

传输分块数据,写入分块数据是在stream:handleEvent:方法处理的,上文有设置输出流代理并且开启,每当有数据可以写入的时候,就会代用代理方法.

  • NSStreamEventHasSpaceAvailable事件表示有新数据可以写入,输入流写入数据方法write:maxLength:
  • 当用户停止录音并且所有数据写入完成之后,我们需要关闭输出流和将其代理置空.如果不关闭流,可能会出现连接超时,数据传输失败.
  • 所有数据是否写入完成需要结合具体场景来判断
  • 关于输入流输出流如何使用,请参考苹果给的demo
  • 下面是伪代码
- (void)stream:(NSStream *)aStream handleEvent:(NSStreamEvent)eventCode
{
    
    switch (eventCode) {
        case NSStreamEventNone:
            NSLog(@"NSStreamEventNone");
            break;

        case NSStreamEventOpenCompleted:
            NSLog(@"NSStreamEventOpenCompleted");
            break;

        case NSStreamEventHasBytesAvailable: {
            NSLog(@"NSStreamEventHasBytesAvailable");
        } break;

        case NSStreamEventHasSpaceAvailable: {
        	NSLog(@"NSStreamEventHasBytesAvailable");

        	// 录音中且有新数据需要写入,输入流写入数据

        	// 录音中没有新数据,等待新数据进入

        	// 录音停止,数据未写完

        	// 录音停止,所有数据未写完,关闭输入流,设置输入流代理为nil

        	....

        } break;

        case NSStreamEventErrorOccurred:
            NSLog(@"NSStreamEventErrorOccurred");
            break;

        case NSStreamEventEndEncountered:
            NSLog(@"NSStreamEventEndEncountered");
            break;

        default:
            break;
    }
}
复制代码

处理服务器响应数据

要获取服务器返回的数据需要结合下面两个代理方法:

  1. URLSession:dataTask:didReceiveResponse:completionHandler:
  2. URLSession:dataTask:didReceiveData:

实现第一个代理方法的completionHandler,才会调用第二个代理拿到服务器数据

- (void)URLSession:(NSURLSession *)session
          dataTask:(NSURLSessionDataTask *)dataTask
didReceiveResponse:(NSURLResponse *)response
 completionHandler:(void (^)(NSURLSessionResponseDisposition disposition))completionHandler
{
    NSLog(@"Send audio status code:%d", (int)urlResponse.statusCode);

    if (urlResponse.statusCode >= 200 || urlResponse.statusCode <= 299) {
        NSHTTPURLResponse *urlResponse = (NSHTTPURLResponse *)response;
   		completionHandler(NSURLSessionResponseAllow);
    }

}
复制代码

接收服务器响应数据 如果服务器返回的数据过大,系统会多次调用这个方法,分断返回响应数据,这些数据需要我们自己拼接处理,本人有两种处理方法:

  1. 保存流上传任务uploadTask为私有属性,并且用KVO监听其state属性变化,当其状态为完成时就可以处理相应数据了.数据的拼接再代理方法中实现
  2. 保存流上传任务uploadTask为私有属性,每次代理方法进来之后拼接响应数据,然后直接处理
- (void)URLSession:(NSURLSession *)session dataTask:(NSURLSessionDataTask *)dataTask
    didReceiveData:(NSData *)data {

    NSHTTPURLResponse *res = (NSHTTPURLResponse *)dataTask.response;
    NSLog(@"Send audio status code:%d", (int)res.statusCode);
    
    if (self.streamUploadTask == dataTask) {
       
        // 拼接数据
        [self.streamReceiveData appendData:data];
        
        // 数据处理


    }  else {

    	// 其他任务响应数据
    }
    
    
}
复制代码

相关链接

How to stream upload recorder audio as multipart message to a http/2 endpoint

NSStream Demo

原文链接

转载于:https://juejin.im/post/5aab7abe6fb9a028d82b852a

  • 0
    点赞
  • 0
    收藏
    觉得还不错? 一键收藏
  • 0
    评论
在Qt框架下模仿iOS语音波形图,可以使用Qt Multimedia模块和Qt Quick绘图功能来实现。 首先,我们需要使用Qt Multimedia模块制音频,并获取音频的波形数据。通过QAudioInput类可以实现音频制,并使用QAudioFormat设置音频格式。在制过程中,可以通过QBuffer类收集音频数据,并使用QAudioBuffer将音频数据转换为波形数据。 接下来,我们可以将获取的波形数据显示在Qt Quick界面上的图形组件中。可以创建一个自定义的波形图形组件,继承自QQuickPaintedItem,并实现paint方法来绘制波形图形。在paint方法中,根据波形数据使用QPainter进行绘制,并根据音频的时间轴来确定波形的位置和形状。可以使用不同的颜色和样式来显示波形,以逼真地模仿iOS语音波形图。 除了绘制波形图形,我们还可以为波形图形组件添加一些交互功能,例如拖动、缩放等。可以通过重写鼠标事件和触摸事件来实现这些功能,例如根据鼠标或手指的位置来确定当前选择的波形片段,并提供相应的操作。 最后,我们将自定义的波形图形组件嵌入到Qt Quick的界面中,通过QML语言进行布局和样式的调整。可以根据需要添加其他的界面元素,例如播放按钮、制按钮等。 通过以上步骤,我们可以在Qt中实现一个模仿iOS语音波形图的界面。这样可以让用户在Qt应用程序中更加直观和便捷地查看和编辑音频波形数据。

“相关推荐”对你有帮助么?

  • 非常没帮助
  • 没帮助
  • 一般
  • 有帮助
  • 非常有帮助
提交
评论
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值