流式pcm播放器

导读

  • ios本身没有现成的支持流式pcm播放的控制器.

  • 另外,获取网络的分片计划是使用SRWebSocket这个库做长链接,即基于“ws://”协议,后续补充说明,这里不细说.

  • 以下所有对比都是基于本地pcm模拟分片情况,实现获取pcm数据,然后组装为pcm,再实现流式播放功能.

  • 目前调研能播放的pcm主要有如下三种,我这里是打算使用AudioUnit实现这个流式播放pcm的.各种方式分析如下.

demo

  • 不想看如下的对比可以直接下demo:https://gitee.com/raychow-dev/pcm-player.git

  • 其中TTVPcmPlayer使用AudioUnit,实现了流式播放pcm.

  • 其中XFPcmPlayer使用AVAudioPlayer,实现了pcm转wav播放pcm,不能随时添加数据.

一 基于AudioUnit (目前主要采用,支持实时填充pcm数据,每次填充大小可不固定)

pcm定义

  • 具体pcm的定义请自行百度 “PCM详解”,这里只关心如下参数.

  • ios开发需要关心的参数如下:

    AudioStreamBasicDescription outputFormat;
    memset(&outputFormat, 0, sizeof(outputFormat));
    outputFormat.mSampleRate       = 16000;             // 采样率
    outputFormat.mFormatID         = kAudioFormatLinearPCM; // PCM格式
    outputFormat.mFormatFlags      = kLinearPCMFormatFlagIsSignedInteger; // 整形
    outputFormat.mFramesPerPacket  = 1; // 每帧只有1个packet
    outputFormat.mChannelsPerFrame = 1; // 声道数
    outputFormat.mBytesPerFrame    = 2; // 每帧只有2个byte 声道*位深*Packet数
    outputFormat.mBytesPerPacket   = 2; // 每个Packet只有2个byte
    outputFormat.mBitsPerChannel   = 16; // 位深

AudioUnit详解

  • 相关api的用法请参考苹果官方文档或自行百度“Audio Unit详解”.

buf填充过程

  • 1.使用AudioUnitSetProperty分别设置“kAudioOutputUnitProperty_EnableIO(设置输出io)”、“kAudioUnitProperty_StreamFormat(设置pcm格式)”,“kAudioUnitProperty_SetRenderCallback(设置回调函数)”.

  • 2.使用AudioOutputUnitStart开始播放.

  • 3.在有“kAudioUnitProperty_SetRenderCallback”设定的回调函数中,这里需要处理总缓冲数据buf和当前播放buf的数据填充.

  • 4.当获取到数据流时,逐步回填数据到总缓冲buf里.然后每次回调函数触发时,可直接按算好的偏移填到对应的播放buf中.(每次写入buf大小可不固定).

  • 5.判断所有buf是否已经使用,然后使用AudioOutputUnitStop停止播放.

二 基于AudioQueue (支持实时分片填充pcm数据,每次填充大小需固定)

demo别人写的,本人测试改pcm时分片处理有点问题.

与AudioUnit使用上的区别

  • AudioQueue常规用法时需要使用多个buf分片缓存数据(处理复杂,但节省内存),而AudioUnit只需要使用1个buf就能满足(需要注意内存溢出).

  • 在分片时,需要更加复杂的处理缓冲问题,及资源填充的先后顺序,

AudioQueue详解

  • 相关api的用法请参考苹果官方文档或自行百度“Audio Queue详解”.

buf填充过程

  • 1.使用AudioQueueNewOutput设置输出队列大小,pcm配置,及回调函数.

  • 2.使用AudioQueueAllocateBuffer初始化每个缓冲buf大小,因为这里需要做分片处理,所有要初始化每个分片.

  • 3.使用AudioQueueBufferRef将分片缓冲区域,写入到播放输出buf中.

  • 4.当获取到数据流时,按指定大小写入分片buf中,这里需要注意数据流的大小必须与分片的大小一致(每次写入buf大小必须固定),不然会出现杂音.这里处理对于pcm播放来说比较复杂,但是对于耳返这类固定长度的处理较友好.

  • 5.判断所有buf是否已经使用,然后不在使用AudioQueueBufferRef填充数据

三 基于AVAudioPlayer (不支持实时填充pcm数据)

wav和pcm的关系

  • 相关pcm的定义请参自行百度WAV和PCM的关系和区别”.

  • 这里只关住pcm的增加wav,header头,模拟成wav.

p01.png

pcm模拟wav格式使用

  • 1.读取pcm的byte数据,在其数据前插入44byte相关的定义,即pcm的一些信息,如mSampleRate,mFramesPerPacket,mChannelsPerFrame....具体填写可参考上图

  • 2.使用AVAudioPlayer播放整个buf数据.

最后编辑于
©著作权归作者所有,转载或内容合作请联系作者
【社区内容提示】社区部分内容疑似由AI辅助生成,浏览时请结合常识与多方信息审慎甄别。
平台声明:文章内容(如有图片或视频亦包括在内)由作者上传并发布,文章内容仅代表作者本人观点,简书系信息发布平台,仅提供信息存储服务。

相关阅读更多精彩内容

  • 使用Cytoscape构建三层网络,并进行模块挖掘 我这部分要做的是”药物-不良反应-靶点”三层网络 虽然在做网络...
    周大大_1009阅读 9,470评论 0 9
  • GEO数据库全称GENE EXPRESSION OMNIBUS,是由美国国立生物技术信息中心NCBI创建并维护的基...
    学习生信的小兔子阅读 9,256评论 3 4
  • 简介 AUTOBEAR的关系型数据库的个人学习笔记,本笔记随时增添,用来巩固知识,查缺补漏。 基础概念 1.DB:...
    AUTOBEAR阅读 432评论 0 0
  • Mobx分享 一、Mobx目前在项目中的作用 1.单个页面的数据存放、修改、即时更新 2.全局数据的存放、修改、即...
    a239612788a3阅读 313评论 0 0
  • 需求 我想在云平台上搭建一个web服务,但是比较穷,只买得起比较便宜的云服务器。但是后台数据库要求内存较大,云服务...
    ynxu15阅读 1,598评论 2 1

友情链接更多精彩内容