吃鸡投屏直播卡一下音画不同步

发布网友发布时间：2022-04-24 23:41

共1个回答

热心网友时间：2022-04-03 00:15

摘要首先我们要明白一个概念，虽然人的肉眼很容易辨别音画是否同步的，但是机器则不然，对于播放器而言，它判断一帧视频和一帧音频是否要在同一个时间渲染和播放，依靠的完全是该数据携带的时间戳信息。2/2如果内容的生产端给音视频数据打的时间戳本身就有问题的话，播放器也往往*为力了，因此，音画不同步问题，更多的时候，应该从生产端去排查原因。不同原因造成的音画不同步的解决方法1/5（1）采集源距离太远如果音频源离麦克风距离太远，声音传播到麦克风的速度远小于画面（光速），那么，摄像头采集到画面后给出的时间戳，肯定要远小于麦克风采集到同一时刻音频给出的时间戳，因此会产生音画不同步问题。解决方案：音频源尽可能离麦克风设备近一点。2/5（2）采集设备内部问题摄像头和麦克风采集音视频，在硬件上都会经过一些信号处理模块，如果处理延时不稳定，则会导致输出数据的时间不稳定，从而导致应用层获取时间戳的时候产生误差，带来音画不同步问题。解决方案：极少数硬件/机型才会有，需要根据采集参数（如采样率）做一些 Jitter 抖动的矫正。3/5（3）时间戳没有在采集的时候获取如果音视频帧的时间戳不是在采集的时候获取，而是在后续的某个环节再获取，则非常大概率地会出现音视频不同步问题。先举个简单的例子：假设音频 A 和视频 B 同时从设备中被采集出来，时间戳为：TA 和 TB，他们差值会很小，播放端收到后会认为是同一时刻的音视频数据，从而一起播放。但是，当音频 A 和视频 B 分别经过某些算法处理模块后，我们不慎在处理后重新获取当前时间戳为了 TA2 和 TB2，那么，这个更新后的时间戳差值可能会非常大，导致音画不同步。那么，一般大家会 “不慎” 在哪些地方更改了采集的时间戳呢？- 音视频算法处理模块比如：视频经过美颜、编码后，重新更新为了处理后的的时间戳。- 缓冲区导致的不同步多线程程序中，往往会在不同线程之间共享一些帧缓冲区，缓冲区会导致音视频对应关系发生变化，如果从缓冲区取数据后，抛弃掉了原有的时间戳，重新使用新的当前时间，那么，肯定会出现问题。- 网络传输导致的不同步由于网络的传输的延时、丢包等原因，同一时刻的音视频包不会正好同时准确到达，如果在接收到了数据后再打上当前的时间戳，肯定也会出现不同步问题。4/5（4）时间戳出现回退或者咨询记录 · 回答于2021-11-23吃鸡投屏直播卡一下音画不同步首先我们要明白一个概念，虽然人的肉眼很容易辨别音画是否同步的，但是机器则不然，对于播放器而言，它判断一帧视频和一帧音频是否要在同一个时间渲染和播放，依靠的完全是该数据携带的时间戳信息。2/2如果内容的生产端给音视频数据打的时间戳本身就有问题的话，播放器也往往*为力了，因此，音画不同步问题，更多的时候，应该从生产端去排查原因。不同原因造成的音画不同步的解决方法1/5（1）采集源距离太远如果音频源离麦克风距离太远，声音传播到麦克风的速度远小于画面（光速），那么，摄像头采集到画面后给出的时间戳，肯定要远小于麦克风采集到同一时刻音频给出的时间戳，因此会产生音画不同步问题。解决方案：音频源尽可能离麦克风设备近一点。2/5（2）采集设备内部问题摄像头和麦克风采集音视频，在硬件上都会经过一些信号处理模块，如果处理延时不稳定，则会导致输出数据的时间不稳定，从而导致应用层获取时间戳的时候产生误差，带来音画不同步问题。解决方案：极少数硬件/机型才会有，需要根据采集参数（如采样率）做一些 Jitter 抖动的矫正。3/5（3）时间戳没有在采集的时候获取如果音视频帧的时间戳不是在采集的时候获取，而是在后续的某个环节再获取，则非常大概率地会出现音视频不同步问题。先举个简单的例子：假设音频 A 和视频 B 同时从设备中被采集出来，时间戳为：TA 和 TB，他们差值会很小，播放端收到后会认为是同一时刻的音视频数据，从而一起播放。但是，当音频 A 和视频 B 分别经过某些算法处理模块后，我们不慎在处理后重新获取当前时间戳为了 TA2 和 TB2，那么，这个更新后的时间戳差值可能会非常大，导致音画不同步。那么，一般大家会 “不慎” 在哪些地方更改了采集的时间戳呢？- 音视频算法处理模块比如：视频经过美颜、编码后，重新更新为了处理后的的时间戳。- 缓冲区导致的不同步多线程程序中，往往会在不同线程之间共享一些帧缓冲区，缓冲区会导致音视频对应关系发生变化，如果从缓冲区取数据后，抛弃掉了原有的时间戳，重新使用新的当前时间，那么，肯定会出现问题。- 网络传输导致的不同步由于网络的传输的延时、丢包等原因，同一时刻的音视频包不会正好同时准确到达，如果在接收到了数据后再打上当前的时间戳，肯定也会出现不同步问题。4/5（4）时间戳出现回退或者