第45月第12天 音视频同步

1.

音视频同步有三种，视频同步音频，音频同步视频，音视频同步到其他时钟，本文介绍视频同步音频，其他方式不适用。项目采用openal做音频渲染，sdl同理，opengl做视频渲染。

 

//得到当前音频从包里拿出的pts减去第一帧pts所得时间再减去openal缓存的时间。//解决网络抖动问题
long long m_audio_real_pts = (m_audio_list_node_pts - m_first_audio_pts) - lvs_openal_getnumqueuedsize_realpts();
 
int delay = 0;
int diff = 0;;
//算出一帧视频本应该显示的时间
delay = 40;
// update delay to sync to audio 
long long video_real_pts = yuv_data_node.pts - m_first_video_pts;
 
printf("yuv_data_node.ActualLen : %lld video_real_pts :%lld\n",yuv_data_node.ActualLen,video_real_pts);
 
//音频过快大于200毫秒 并且有音频存在的情况下 ,以及音频队列或缓存不为传输中间空     //解决网络抖动问题
if (m_audio_real_pts - video_real_pts > 200 && m_isfind_first_audio_pts == 1 && 
    (m_list_Raw_data_pcm.size() != 0 || lvs_openal_getnumqueuedsize() != 0 ))
{
    m_timer_realtime_video = 1;
}
//视频过快大于200毫秒 并且有音频存在的情况下,以及音频队列或缓存不为传输中间空      //解决网络抖动问题
else if (video_real_pts - m_audio_real_pts > 200 && m_isfind_first_audio_pts ==1 &&
(m_list_Raw_data_pcm.size() != 0 || lvs_openal_getnumqueuedsize() != 0 ))
{
    m_timer_realtime_video = delay* 5; //如果 视频显示过快 则停留 5帧的时间
}
else
{
    diff = video_real_pts - m_audio_openal_pts; 
 
    if(abs(diff) < AV_NOSYNC_THRESHOLD) //求浮点数x的绝对值
    {
        if(diff <= -delay) 
        {
            delay = 10;       //如果 视频显示过慢，离音频 过于远 则 显示时间为10ms
        } 
        else if(diff >= delay)
        {
            delay = 2 * delay;  //如果 视频显示过快 则停留 两帧的时间
        }
    }
    m_timer_realtime_video = delay;
}

 

https://blog.csdn.net/zhuweigangzwg/article/details/59528378