解析libpag项目中AudioTrack播放MPEG-4 AAC音频的技术要点

在Android音视频开发中，使用AudioTrack播放音频是一个常见需求。本文将以libpag项目为背景，深入分析直接使用AudioTrack播放composition.audioBytes()获取的音频数据时出现白噪音问题的技术原因及解决方案。

音频数据格式的本质差异

libpag的composition.audioBytes()方法返回的是封装在MPEG-4容器中的AAC音频数据。这种格式与AudioTrack所需的PCM原始音频数据存在本质区别：

1. MPEG-4容器格式：这是一种多媒体容器格式，可以包含视频、音频等多种数据流
2. AAC编码：一种有损音频压缩格式，需要通过解码才能得到可播放的PCM数据
3. PCM数据：脉冲编码调制数据，是未经压缩的原始音频样本，可直接由AudioTrack播放

问题根源分析

开发者直接使用AudioTrack播放MPEG-4 AAC音频数据时出现白噪音，主要原因在于：

1. 格式不匹配：AudioTrack设计用于播放原始PCM数据，无法识别容器格式和压缩编码
2. 数据解析缺失：没有进行必要的解封装和解码处理
3. 字节顺序问题：容器格式的字节序与PCM数据不同

完整解决方案

要实现正确播放，需要经过以下处理流程：

1. 解封装处理

首先需要从MPEG-4容器中提取出AAC音频流：

// 伪代码示例
MediaExtractor extractor = new MediaExtractor();
extractor.setDataSource(new ByteBufferDataSource(composition.audioBytes()));
MediaFormat format = extractor.getTrackFormat(audioTrackIndex);

2. AAC解码

获取AAC数据后，需要使用MediaCodec进行解码：

MediaCodec codec = MediaCodec.createDecoderByType(format.getString(MediaFormat.KEY_MIME));
codec.configure(format, null, null, 0);
codec.start();

// 输入输出缓冲区处理逻辑
// ...

3. PCM数据播放

解码后得到的PCM数据才能用AudioTrack播放：

AudioTrack audioTrack = new AudioTrack(
    AudioManager.STREAM_MUSIC,
    sampleRate,
    channelConfig,
    AudioFormat.ENCODING_PCM_16BIT,
    bufferSize,
    AudioTrack.MODE_STREAM);

audioTrack.play();
audioTrack.write(pcmData, offset, size);

性能优化建议

在实际应用中，还需要考虑以下优化点：

1. 缓冲区管理：合理设置缓冲区大小以避免卡顿或延迟
2. 异步处理：解码和播放应在不同线程中进行
3. 错误处理：添加对异常情况的处理逻辑
4. 资源释放：及时释放MediaExtractor和MediaCodec资源

替代方案

对于简单场景，也可以考虑使用Android提供的更高级API：

1. MediaPlayer：内置了解封装和解码功能
2. ExoPlayer：Google推荐的媒体播放解决方案，功能更强大

总结

理解不同音频格式的特性和处理流程是Android音视频开发的基础。libpag项目返回的MPEG-4 AAC音频需要经过完整的解封装、解码流程才能转换为AudioTrack可播放的PCM数据。开发者应当根据项目需求选择适当的处理方案，平衡开发效率和性能要求。