伴随着直播,在线社交,在线课堂,在线会议的快速发展和元宇宙产业的不断壮大,音频技术在其中扮演着越来越重要的角色可是,当前流行的视频直播,音视频群聊,一对一语音匹配聊天等社交场景往往伴伴随着嘈杂的环境噪音,语音社交过程充满干扰
18日,记者从大湾区荔枝集团获悉,其大湾区音频技术团队采用硬件或软件降噪,不同软件降噪算法,结合场景降噪等方法,引入AI降噪,可有效抑制互动娱乐场景中音视频通话时的背景噪音,保证不损伤语音,最终有效提升各种复杂场景下的实时互动体验。
荔枝集团音频技术负责人魏敦孝表示,不同的在线场景对高质量的音频体验有不同的要求比如在教育场景中,强调的是知识获取,语音清晰,互动及时,课堂场景侧重于说话的流畅性和清晰性,在娱乐场景中,除了有趣的内容吸引用户,音频的优质体验和交互功能是让用户愿意持续参与的最重要因素之一
伴随着计算能力的不断增长,基于大数据训练的AI语音降噪算法具备了强大的能力,使得实时AI语音降噪算法应用于互动赌场场景成为可能相比传统降噪算法,荔枝技术团队研发的AI降噪效果有了很大提升,键盘敲击声,喝饮料声,背景讨论声等噪音可能在直播场景中经常会遇到,可以有效抑制甚至降低到最低的影响
在互动娱乐业务场景中,要求降低整个频段的噪声考虑到CPU性能和降噪处理时间,采用混合架构来降低整个频段的噪声低频用AI模型处理,高频用传统降噪处理魏敦孝说
荔枝的技术团队利用站内的海量语音样本来训练这个AI降噪模型,可以过滤掉不想要的声音,所以每个人的音频都可以更清晰的传到接收者的耳朵里。
荔枝音频处理的目标就是两个字:静——清,静让用户听得更清晰,更真实,更好荔枝集团技术副总裁刘晓宇表示,伴随着元宇宙的到来,用户对音质和沉浸式体验的要求越来越高接入设备的效果,低延迟,空间音频技术,环境声学模拟都是音频互动娱乐目前需要攻克的难点荔枝技术团队不断奋进
郑重声明:此文内容为本网站转载企业宣传资讯,目的在于传播更多信息,与本站立场无关。仅供读者参考,并请自行核实相关内容。