美文网首页
视频、音频打时间戳的方法(转)

视频、音频打时间戳的方法(转)

作者: a0b6e2a49203 | 来源:发表于2018-01-05 11:23 被阅读308次

    一 固定帧率

    视频时间戳

    pts = inc++ *(1000/fps);  其中inc是一个静态的,初始值为0,每次打完时间戳inc加1.

    在ffmpeg,中的代码为

    pkt.pts= m_nVideoTimeStamp++ * (m_VCtx->time_base.num * 1000 / m_VCtx->time_base.den);

    音频时间戳

    pts = inc++ * (frame_size * 1000 / sample_rate)

    在ffmpeg中的代码为

    pkt.pts= m_nAudioTimeStamp++ * (m_ACtx->frame_size * 1000 / m_ACtx->sample_rate);

    采样频率是指将模拟声音波形进行数字化时,每秒钟抽取声波幅度样本的次数。

    。正常人听觉的频率范围大约在20Hz~20kHz之间,根据奈奎斯特采样理论,为了保证声音不失真,采样频率应该在40kHz左右。常用的音频采样频率有8kHz、11.025kHz、22.05kHz、16kHz、37.8kHz、44.1kHz、48kHz等,如果采用更高的采样频率,还可以达到DVD的音质

    对采样率为44.1kHz的AAC音频进行解码时,一帧的解码时间须控制在23.22毫秒内。

    背景知识:

    (一个AAC原始帧包含一段时间内1024个采样及相关数据)

    分析:

    1 AAC

    音频帧的播放时间=一个AAC帧对应的采样样本的个数/采样频率(单位为s)

    一帧 1024个 sample。采样率 Samplerate 44100KHz,每秒44100个sample, 所以 根据公式  音频帧的播放时间=一个AAC帧对应的采样样本的个数/采样频率

    当前AAC一帧的播放时间是= 1024*1000000/44100= 22.32ms(单位为ms)

    2 MP3

    mp3 每帧均为1152个字节, 则:

    frame_duration = 1152 * 1000000 / sample_rate

    例如:sample_rate = 44100HZ时, 计算出的时长为26.122ms,这就是经常听到的mp3每帧播放时间固定为26ms的由来。

    二 可变帧率

    有很多的采集卡,摄像头,在做采集的时候,明明设置的25FPS,但实际采集数据回调过来,发现并不是40毫秒的间隔,而是50,60,甚至100不等的时间间隔。

    这就给编码后打时间戳带来很大的困难。

    在libav里,我们的默认编码参数都是:

    ptAvEncoder->ptAvStreamVideo->codec->time_base.den = s32Fps;

    ptAvEncoder->ptAvStreamVideo->codec->time_base.num = 1;

    这样在编码后的时间戳以1递增,只适合于固定帧率。

    我们来改一下:

    ptAvEncoder->ptAvStreamVideo->codec->time_base.den = s32Fps * 1000;

    ptAvEncoder->ptAvStreamVideo->codec->time_base.num = 1* 1000;

    这样就把时间戳的scale变成了毫秒,就可以以毫秒为单位进行计算了,如下:

    tAvPacket.pts = ((s64)u32TimeStamp * (s64)s32Fps);

    u32TimeStamp是从开始记录的时间差值,以毫秒为单位;s32Fps是帧率。

    对于音频,mp4文件默认是采样率为tick的,时间戳计算为:

    tAvPacket.pts = (AvEncoderAudioInSizeGet(hHandle) * ( (s64)(u32TimeStamp)) / (AvEncoderAudioInSizeGet(hHandle) * 1000 / ptAvEncoder->ptAvStreamAudio->codec->sample_rate);

    AvEncoderAudioInSizeGet(hHandle) 每次编码器需要的PCM数据长度。

    u32TimeStamp是从开始记录的时间差值,以毫秒为单位。

    ptAvEncoder->ptAvStreamAudio->codec->sample_rate PCM采样率,代表一秒的数据量。

    因为乘以了1000,所以也化成了毫秒单位。

    对于mp4,视频直接用绝对时间,音频用数据量,对rtmp,视频是毫秒计算,音频也换算成毫秒计算

    0

    作者:rogerwu1228

    链接:https://www.jianshu.com/p/2d8311c3071c

    來源:简书

    著作权归作者所有。商业转载请联系作者获得授权,非商业转载请注明出处。

    相关文章

      网友评论

          本文标题:视频、音频打时间戳的方法(转)

          本文链接:https://www.haomeiwen.com/subject/vibjnxtx.html