订阅
屌丝岛在线看最新电影 https://www.diaosidao.net
科技日报记者龙跃梅 随着疫情下直播、在线社交、在线课堂、在线会议等快速发展和元宇宙产业不断壮大,音频技术在其中扮演的角色越来越重要。但当下流行视频直播、音视频群聊、1对1语音匹配聊天等社交场景,却常常伴随吵闹的环境噪声,语音社交过程充满干扰。 18日,记者从位于大湾区的荔枝集团获悉,该公司大湾区的音频技术团队使用硬件或软件降噪、不同软件降噪算法、降噪与场景结合等方法,引入AI降噪,可以有效抑制互动文娱场景下音视频通话过程中的背景噪声,并保证语音无损伤,最终有效提升在多种复杂场景下的实时互动体验。 荔枝集团音频技术负责人魏敦晓介绍,不同的在线场景对于音频高音质的体验需求不一样。比如教育类场景中,其着重在于知识的获取和声音清晰,及时互动;会议类场景则看重语音的流畅度和清晰度;而文娱场景中,除了有趣的内容吸引用户外,音频的高音质体验和互动性功能,是让用户愿意持续参与的其中一个最重要因素。 随着算力持续增长,基于大数据训练的AI语音降噪算法具有强大的能力,使实时AI语音降噪算法在互动娱乐场景中成为可能。相比于传统的降噪算法,荔枝技术团队自研的 AI 降噪的效果有巨大提升,对直播场景可能经常会遇到敲键盘、喝饮料、背景讨论等噪声能进行有效抑制乃至降低到最低影响。 “互动娱乐业务场景中要求对全频带进行降噪,考虑到CPU性能和降噪处理时间,采用一种混合架构来对全频带进行降噪,低频采用AI模型处理,高频采用传统降噪处理。”魏敦晓表示。 荔枝技术团队利用站内海量的语音样本,训练的这个 AI降噪模型,能够过滤掉不需要的声音,因此每个人的音频都可以更加清晰传递到接收者耳朵里。 “荔枝音频处理目标就是两个字:清静——清晰、安静。让用户听得更清晰、更真切、更好。”荔枝集团技术副总裁刘晓宇说,随着元宇宙的到来,用户对声音的质量、沉浸式体验要求越来越高,接入设备的效果、低延时、空间音频技术、环境声学模拟等,均是目前音频互动娱乐需要攻克的难点,荔枝技术团队正在不断奋力向前。 (文章来源:科技日报) 文章来源:科技日报![]() |
10 人收藏 |
![]() 鲜花 |
![]() 握手 |
![]() 雷人 |
![]() 路过 |
![]() 鸡蛋 |
收藏
邀请