音频解码播放总结

最近在做 NVR 接入相机音频解码播放，支持 G711A、G711U、AAC 解码播放，整个流程大概就是 从相机获取 rtsp 码流，包含 音频数据，使用 ffmpeg 或者开源库对音频进行解码 成 PCM 数据，使用 alsa 库调用音频设备进行播放。

由于使用 ffmpeg 解码需要集成 ffmpeg 库，代码比较复杂，因此使用 开源代码解码 PCMA/PCMU 音频，采用 faad 库解码 AAC 音频。

1、PCMA/ PCMU 音频，一般采样率为 8000HZ。

使用开源库进行解码，参考链接：

https://www.codenong.com/cs105720474/
 

只需将源码集成到代码中，调用指定函数进行解码，非常方便；

2、AAC 音频

AAC 音频相对来说复杂一些，首先是 rtsp 取流使用 rtp 协议荷载的 AAC 音频，不带 7 字节的 AAC 音频头数据 ADTS， 需要将这7字节补齐，否则送入 faad库不能解码，ADTS 及补齐参考：

https://www.cnblogs.com/liwen01/p/17337962.html

使用 faad 库解码 PCM 相对使用 ffmpeg 简单，但在使用过程中也遇到一个奇怪的问题，传入的 AAC 音频通道数为 1，采样率 16K HZ，输出的 PCM通道数变成了2，数据量也随之翻了一倍，后面从网上找到了答案（需要在编译的时候修改部分宏），参考：

faad2 AAC解码库 采样率翻倍 通道数为2 解决方法

3、alsa 播放

下载 alsa 源码编译相应库集成到系统，进行参数初始化并送入 PCM 数据即可完成音频播放，遇到的一个问题是 snd_pcm_open 第二个参数 name 设置 为 hw:3,0 时，调用 

snd_pw_params_set_channels 设置 1 通道报错 -22， Invalid argument，

将 name 设置 为 plug:hw:3 解决。

两者的区别：

hw: accesses the hardware device directly. // 直接访问硬件

plughw: inserts sample rate and format conversion plugins, if needed. //经过采样率和格式转换插件