当前位置: 首页 > 科技赋能

如何增强在线会议的“沉浸感”?腾讯会议黑科技带来新突破

时间:2024-05-19 16:29:16 科技赋能

腾讯会议背后的又一黑科技浮出水面。

7月7日,为了应对复杂声学场景下实时语音通信技术的挑战,解决企业会议室召开会议的问题,腾讯会议旗下天籁实验室推出了天籁语音模组解决方案,在腾讯AILab多项技术支持下,实现12米超远距离拾音,消除多种会议噪音,在双讲、回声消除等方面实现突破性升级。

据了解,该方案已授权开放给腾讯会议室硬件合作伙伴,并率先在腾讯会议室专用机型上使用,助力打造会议室场景高清、纯净、流畅的会议体验。

这是腾讯会议作为技术解决方案提供商本着“不做硬件”大方向、专注于在线会议场景体验的又一次升级。

对此,腾讯天籁实验室总经理商世东表示:“腾讯会议不做硬件,但我们会帮助这些硬件厂商,比如在复杂声学场景下的体验需要优化时开放技术解决方案。

”据了解,腾讯会议目前正在通过开放音视频认证标准,并与硬件设备厂商合作,共同打造为企业量身定制的“软硬件一体化”云视频会议解决方案。

解决企业会议室复杂场景召开会议的难题,为企业会议室安装“顺耳”。

如今,在线会议已成为企业高效办公的标配。

越来越多的企业衍生出了线上线下协同会议的混合会议需求。

接下来就是会议室场景中面临的声学挑战。

一方面,在远场场景下,说话人会远离麦克风,导致麦克风采集到的有效信号逐渐减弱,信噪比下降。

另一方面,由于会议室经常空无一人,声音经玻璃和墙壁折射产生反射声和混响,各类噪音会严重影响会议质量。

对于企业来说,如何有效应对企业会议室复杂的声学环境已成为新课题。

基于会议室的具体场景,腾讯会议推出了天籁语音模组解决方案。

首次结合房间声场感知、采集和空间声场重建技术,开创性地解决复杂会议室场景下的远场多人音频通信和多扬声器问题。

实时跟踪、多人自动取景等实时音视频技术问题,帮助企业和用户实现远场复杂物理空间通信体验的突破性提升。

例如,在同一个会议室中,随着人与音视频设备的距离变远,声音在传播过程中会逐渐减弱。

因此,在参加企业培训、工作汇报等企业会议时,最常见的现象之一就是听不清。

连听都听不到。

针对这一点,天籁语音模组解决方案将多个MEMS麦克风板嵌入到会议大屏中,与音频处理器相结合,实现超广角和12米超远距离拾音,相当于与会者即使在他们相距4层楼。

距离可以像面对面交流一样清晰自然,给参与者更灵活的空间,在自由无限制的氛围中进行讨论。

在远程会议中,很多人经常会遇到声音滞后、延迟导致声音忽快忽慢等尴尬情况,甚至出现与会者沉默或同时说话的尴尬情况,很容易破坏沟通思路,影响进度。

的会议沟通。

为了解决这一痛点,天籁语音模组解决方案实现突破,将设备上行延迟降低至数十毫秒,让远程语音交流像面对面交谈一样实时。

值得一提的是,针对多人同时通话时声音明显失真的问题,天籁语音模组解决方案可以有效实现双语音不削波、回声泄漏、近端语音抑制,有效保证当多人讨论时,每个人都能听到个人的声音,听得清楚、听得真切,增强了会议的参与感。

天籁语音模块还基于深度学习模型,能够将空调、风扇声等稳定噪音与笔触屏幕声、键盘声、手指敲击桌面声等会议室场景中的各种突发性噪音结合起来。

桌子、放置水杯、翻纸等进行针对性消除,提高语音信噪比,为用户营造更加专注、高效的会议氛围。

开放技术能力,打造软硬件一体化的云视频会议生态系统。

会议是公司内部和外部协作最重要的形式。

从参加人数来看,有两三人的小型会议,十几人的中型会议,以及数百人的大型会议。

受疫情影响和在家办公,很多人已经习惯通过智能移动设备参加远程会议。

当人们重新回到线下工作并在会议室与其他人远程联系时,他们会感到有点不舒服。

例如,如果会议室的硬件设备只连接内网,与企业外部客户开会时几个人在一起交谈,声音效果就不好。

天籁语音模组解决方案的推出,是腾讯会议基于企业用户需求,在企业会议室场景的再发力。

腾讯会议天籁实验室技术研发专家于涛表示,天籁模块的核心能力是解决会议室场景下的远场拾音问题。

腾讯天籁实验室融合感知编码、声学硬件设计、经典语音信号处理和深度学习技术,覆盖不同应用场景、网络条件和终端设备,为腾讯会议提供底层实时音频通信技术。

于涛还表示,远场拾音能力的应用需求其实非常广泛。

除了会议场景之外,未来用户或许还可以在更广阔、更复杂的物理声学空间中接入互联网,实现音视频的动态实时沟通和交互。

作为云视频会议产品,腾讯会议自年底上线以来,一直致力于满足用户不同场景的会议需求。

去年9月,腾讯会议发布企业版、会议室连接器、新一代云视频会议室解决方案“腾讯会议室”,试图从根本上解决企业组织难、效率低、管理难的问题。

会议。

例如,在会议室交互屏等智能硬件上安装“腾讯会议室”后,可以快速登录腾讯会议,发起远程会议,实现屏幕共享、白板等功能。

据腾讯会议产品经理陈伟丹介绍,“腾讯会议室”本身就是一套会议室软件系统。

正是因为它是软件,所以它可以像水一样与不同形式的硬件结合,加强与更多硬件厂商的合作。

深度合作。

除了与硬件厂商合作外,腾讯会议还积极采用开放标准API接口和二次开发,帮助企业IT、系统集成商等合作伙伴轻松适配各种会议场景,与腾讯会议快速对接。

数据显示,近万家企业通过接入腾讯会议API,在不同场景下的会议体验得到了极大提升。

如今的智能会议室远不是传统摄像头、麦克风等简单的解决方案,而是可以与会议室联动的一整套视觉和听觉解决方案。

腾讯会议正是基于这样的理念,对产品进行迭代,对技术进行升级。