webrtc 渲染音频时遇到的问题
有用户反馈连麦时,直播间会有电流声,后面排查发现是 webrtc 内部播放器渲染音频时,用户的播放设备不支持 48000hz 采样率(我们传输的音频采样率都是 48000hz),导致音频数据受损而出现电流音
详细过程:
用户本地的混音是通过 webrtc 内部的回调拿到的,而用户的播放设备不支持 48k,导致 webrtc 输出的混音是非 48k,远端传来的音频是 48k 的,而两个混音在进一步混音时,因为采样率不同,导致音频数据不完整
如下摘取片段,音频数据不完整的过程可以参考这篇文章:短视频中解决音视频混音出现杂音的问题
从这个示意图可以很明显的看出问题,48000Hz 重采样之后的音频 buffer size已经变小了,但是用这个 buffer 和 44100Hz 正常的 buffer 合并,那其中一个音频后面就是一段空数据,所以合成之后肯定会出现杂音的。
解决方法: 不使用播放设备默认的采样率,在 webrtc 回调中手动重采样音频

【推荐】国内首个AI IDE,深度理解中文开发场景,立即下载体验Trae
【推荐】编程新体验,更懂你的AI,立即体验豆包MarsCode编程助手
【推荐】抖音旗下AI助手豆包,你的智能百科全书,全免费不限次数
【推荐】轻量又高性能的 SSH 工具 IShell:AI 加持,快人一步
· 地球OL攻略 —— 某应届生求职总结
· 周边上新:园子的第一款马克杯温暖上架
· Open-Sora 2.0 重磅开源!
· 提示词工程——AI应用必不可少的技术
· .NET周刊【3月第1期 2025-03-02】