一、数据缓存
1. 缓存数据结构
NuPlayer使用两个队列分别缓存音频和视频数据:
struct QueueEntry {
sp<MediaCodecBuffer> mBuffer; // 存储解码后的音视频数据
sp<AMessage> mMeta; // 元数据(如时间戳)
sp<AMessage> mNotifyConsumed; // 数据消耗后的回调通知
//如果该字段为NULL,则表示当前QueueEntry是最后一个(EOS)。
size_t mOffset; // 数据读取偏移量
status_t mFinalResult; // 结束标志
int32_t mBufferOrdinal; // 缓冲区序号
};
List<QueueEntry> mAudioQueue; // 音频数据队列
List<QueueEntry> mVideoQueue; // 视频数据队列
2. 缓存填充过程
解码后的数据被封装为QueueEntry
解码器输出数据 → NuPlayer::Decoder::onMessageReceived
→ handleAnOutputBuffer → NuPlayer::Renderer::queueBuffer
→ onQueueBuffer
音频数据存入mAudioQueue,视频数据存入mVideoQueue
触发postDrainAudioQueue_l()或postDrainVideoQueue()开始渲染
3. 缓存消费流程
音频消费:
• 通过AudioSink::write()写入音频设备
• 每次写入后通过mNotifyConsumed通知解码器
视频消费:
• 通过Surface直接提交给显示系统
• 根据VSync信号和音频时钟调整渲染时机
4.关键函数
NuPlayer::Renderer::onQueueBuffer
总结:
-
数据分类处理
• 通过audio标志区分音视频数据,分别存入mAudioQueue/mVideoQueue• 视频流首次出现时初始化VideoFrameScheduler
-
同步控制机制
• 时间差计算:比较队列首帧音视频PTS差值(firstVideoTimeUs - firstAudioTimeUs)• 纠偏策略:当音频超前视频超过100ms时,丢弃首帧音频数据(避免音画不同步)
-
触发渲染流程
• 音频:postDrainAudioQueue_l() → 最终调用AudioSink::write()• 视频:postDrainVideoQueue() → 通过Surface提交给显示系统
-
线程安全
• 音频队列操作使用Mutex::Autolock保护(mLock)• 视频队列因运行在渲染线程,无需额外加锁
函数解析
void NuPlayer::Renderer::onQueueBuffer(const sp<AMessage> &
253



被折叠的 条评论
为什么被折叠?



