首页
时事
民生
政务
教育
文化
科技
财富
体娱
健康
情感
更多
旅行
百科
职场
楼市
企业
乐活
学术
汽车
时尚
创业
美食
幽默
美体
文摘
开会这个技术活,让AI+RTE 玩出了新高度
科技
2024-09-27 23:04
浙江
▲
图
片由AI生成
AI+RTE双引擎驱动,描画未来会议新形态。
作者 |
三北
编辑 |
漠影
越来越多的企业正在将
大模型装进视频会议
系统,但他们发现,AI会议的搭建并不容易:
AI新功能识别不准确、上手不好用,会议系统与老旧硬件设备不兼容,AI内容分析引发企业数据安全担忧,定制化需求得不到及时满足……未来AI会议的畅想虽好,部署
成本与精力
问题
令很多企业望而却步。
近日,在北京举办的“AI重塑会议协作”产品发布会上,
声网推出的
“
灵动会议
”
为企业提供新的选择——提供搭载
RTE(实时互动)与生成式AI双引擎
技术的
aPaaS平台
,让企业轻松搭建具备实时字幕、AI会议纪要、AI主持人等多项能力的新一代AI会议,提升会议体验和效率。
与市面上常见的Zoom、腾讯会议等C端产品不同,灵动会议主要面向政企、云会议厂商、硬件会议厂商及大中型行业客户等B端市场。它帮助客户
缩短实现AI会议搭建和传统会议转型的过程
,通过SFU+MCU混合架构部署的低代码平台,提供开箱即用的能力包,满足客户会议、协作和调度需求。
成立于2014年的实时互动云服务商声网,已经在实时互动领域积累了多年经验。作为底层技术的赋能者,声网正率先将AI大模型整合前沿音视频技术,为企业客户在自身应用内构建多种AI实时音视频互动场景提供新选择。
大模型能为视频会议行业带来什么新故事?又会为行业带来什么样的价值?通过对话声网数字化行业负责人和利鹏,本文对此进行了深入探讨。
▲声网数字化行业负责人和利鹏
01
.
从纪要到AI主持人
大模型催生未来会议新形态
当前,视频会议行业正处在一个变革的关键时期。
我们可以看到
三个趋势
:MCU(多点控制单元)传统会议架构正在收缩,云会议崛起;会议系统由沟通工具,转变成为企业业务能力;AI赋能,会议向智变。
聚焦AI赋能,和利鹏告诉智东西,
大模型已为视频会议行业带来了新变化
。
以常见的
会议纪要
应用来说,在此前的小模型时期,会议纪要不准确、不好用,甚至连熟悉的人名都记不准确,没有被真正用起来;现在随着大模型引入,会议纪要的准确度大大提升,并通过与用户知识库对接,用得越多越准确,逐渐成为高频使用的效率工具。
再以
会议回顾
应用为例,此前的会议回顾大多是录制一个视频文件,大多数没有人会去回看;现在,经过AI对知识进行切片,用户可以直接关注感兴趣的部分,在中途参会或错过会议的情况下也能快速了解会议要点,办公体验和效率也由此得到显著提升。
而从热门的
多模态
出发,视频会议系统的“听说看”能力都将升级,比如未来也可能是
数字分身
代替人去参加会议进行表达,大模型正催生更多全新体验诞生。
“大模型对行业有一个很大的改变——如果说以前视频会议系统是一个
音视频通道
,那么AI时代的视频会议已具备了内容洞察和决策助力,升级成为一个
智能协作平台
。”和利鹏告诉智东西。
可以看到,从纪要到AI主持人,大模型正催生
未来会议新形态
。这种未来会议新形态,也将成为企业协同效率提升、业务成长的关键一环。
02
.
AI会议≠会议AI
单一会议工具向业务决策支撑平台转变
知名行研机构IDC数据显示,2023年中国(软硬件)视频会议市场规模达到9.2亿美元(约合64.9亿元人民币)。多位视频会议业内人士预测,大模型至少将为视频会议行业带来
翻倍的市场增量
。
在巨大新市场的驱动下,各大云巨头、SaaS厂商、音视频技术厂商以及传统视讯企业,都推出了AI会议相关功能及应用,试图在这个新的市场中分一杯羹。
围绕当下“神仙打架”的市场格局,和利鹏认为,
会议AI并不等于AI会议
。
市面上的不少会议AI,只是在上层应用层将单点的AI功能加到会议系统中,而灵动会是
从底层会议的架构进行了改变
,采用了
AI与RTE(实时互动)双引擎架构
,从底层重塑会议与协作。
▲灵动会议RTE与AI双引擎架构
具体来看,灵动会议采用了RTE 和AI 双引擎架构,
RTE 技术确保低延迟、高可靠的音视频传输,使大模型能够接收到高质量的音视频内容,并进行更准确的处理。而生成式AI
通过分析会议内容,提供智能功能,如自动生成字幕、会议纪要,并通过RTE的低延迟、高可靠通道来分发,以实现
与大模型的互动
。因此RTE与AI的结合赋予会议系统“听、说、看”的能力,这也正是灵动会议产品推动会议系统从单纯的信息传输工具,向具备内容理解与决策支持的智能引擎转变的核心因素。
基于声网自研的
AI Agent框架
,灵动会议能够兼容市场上主流的 ASR(自动语音识别)、LLM(大语言模型)和 TTS(文本转语音)技术,具备工作流编排能力,提供流畅自然的交互体验。
该框架尤其
支持市场主流的
多模态大模型的集成
。企业不仅可以使用单一模型,还可以将图像、音频、文本处理等多模态的大模型能力融合到一起,满足更复杂的会议场景需求。比如AI主持人可以帮助用户把控会议节奏、提供会议建议、调节音视频效果等,实现更自然沟通。
▲和利鹏在讲解声网灵动会议AI Agent框架
由上所述,灵动会议重点不仅在于底层的AI框架,还在于声网多年积累的RTE技术。
基于灵动会议双引擎架构,AI不再是一个单一的工具模块,而是通过与声网RTE平台的深度融合,真正参与并优化会议的各个环节。
据悉,灵动会议RTE引擎能提供领先的音视频性能体验,依托声网SD-RTN™软件定义实时网,能做到80%丢包情况下音视频通话流畅,国内视频平均卡顿率小于1.1%,海外视频平均卡顿率小于 2%;同时基于视频增强策略、AI降噪、回声消除等技术提高视频会议质量。
此外,企业在数字化转型过程中,由于业务的逐步演进,常常会
面临新设备引入、新开发环境和新功能组件接入的需求
。然而,由于缺乏统一的管理底座,很多企业不得不为不同的业务场景构建独立的系统,形成“烟囱式”建设模式。这种模式导致系统封闭,资源利用率低,运维成本高。
而声网灵动会议产品推出了
企业级音视频管理中台
,作为统一的管理底座。这种中台能够将企业内部所有在线协作业务一站式集成,
同时,通过
AI技术的支持
,实现音视频数据的统一分析和知识沉淀,逐步
构建企业的知识库
,成为企业的核心竞争力之一。
可以预测,在AI与RTE的双引擎驱动下,视频会议系统正从
沟通管道
变为
智能协作平台
,不仅能分析内容、指导决策,还能够帮企业沉淀知识库,从而重塑会议与协作。
03
.
AI再造会议进行时
先过安全、成本、兼容三道关
自去年以来,和利鹏和他的团队开始观察到了市场新的需求变化,AI视频会议市场需求正在起量。但同时,对于大多数企业来说,搭建一款AI驱动的视频会议系统还是会需要
面临许多问题
。
如AI会议带来体验升级的同时,如何保证数据安全?如何根据企业性质快速实现个性化定制?新系统如何兼顾与现有会议室设备的兼容性,实现更低成本的利旧?解决这些问题,企业往往需要耗费大量的时间、精力和经济成本。
灵动会议为合作伙伴提供另一种选择
:选择开箱即用的aPaaS会议服务,免去大量重复、复杂的中间工作,专注于自身应用的开发和使用。
面对数据安全问题
,很多政企倾向于私有云或混合云部署方式。灵动会议支持私有化、混合云、公有云等多种部署模式,同时支持无缝备份与切换,这就能够确保业务的连续性和数据的安全性。
面对定制化难度问题
,灵动会议采用aPaaS低代码设计,通过提供灵活的API接口、以及UI组件和即插即用的集成功能,使得开发者可以在较短的时间内完成集成,无需进行大量的底层开发。
开发者可以通过现成的UI组件快速集成会议功能,包括会议召集、虚拟背景、屏幕共享、白板互动等,几乎涵盖了所有常用功能,仅需4个方法和回调,便可定制UI,大大缩短开发周期,加速应用上线。
面对传统MCU设备利旧痛点
,灵动会议提供了最新的解决方案:SFU+MCU混合架构。据悉,MCU模块与SFU模块直接集成,抛弃了传统的网关架构,通过裸流通信技术实现终端设备与云端的直接互通,解决了网关集成时的画质损失问题,并支持多画面灵活组合。
▲SFU+MCU混合架构打破传统模式
目前,已有不少云会议、传统MCU、大中型行业客户用上了灵动会议。
以某头部云厂商为例
,其目前已利用灵动会议打造了高效的云会议平台。该客户面临的是Zoom平台到期和架构替换问题,声网不仅为其提供了全球覆盖的公有云服务,使其在保存原有应用的情况的无缝替换架构,还助其快速扩展了所需的同声传译等新能力,最终节省系统运维成本百万投入。
以某传统硬件会议MCU厂商为例
,其在行业里耕耘十几年,架构无法满足客户关于云视频和智能化的新需求。其曾求解于开源WebRTC、第三方的云厂商,都面临了投入成本高、体验受损等问题。灵动会议的SFU+MCU混合架构帮助其进行整个系统完整升级,从而获得了更好的发展机会。
可以看到,各类厂家都可以基于声网aPaaS灵动会议快速实现云化、智能化升级。
04
.
结语:大模型时代
20年视讯行业迎来新拐点
20多年来,视频通讯行业发生了巨大的变化。从硬件视频系统到云会议,再到智能会议,技术和会议的形式不断迭代。在声网等技术赋能者及各路会议厂商的推动下,视频会议产品核心正从一个通道进化为智能协作平台。
与此同时,视讯用户的核心需求仍然没有变,那就是不断提高会议效率并达成决策目标。当下,大模型技术为这一目标实现带来了新的动力,20年视讯行业迎来新拐点,以声网灵动会议为代表的新一代AI会议方案也正成为新的行业发展引擎。
(本文系网易新闻•网易号特色内容激励计划签约账号【智东西】原创内容,未经账号授权,禁止随意转载。)
http://mp.weixin.qq.com/s?__biz=MzA4MTQ4NjQzMw==&mid=2652774707&idx=1&sn=700d58ef0f3c8f9c1a916648c11b97a8
智东西
智能产业新媒体!智东西专注报道人工智能主导的前沿技术发展,和技术应用带来的千行百业产业升级。聚焦智能变革,服务产业升级。
最新文章
打响芯片智能体化第一枪的联发科,成了AI手机时代领跑者
智东西对话杨元庆:这次联想把混合式AI讲清楚了
阿里投的上海独角兽上市了!全国第三,累亏9亿,开盘破发
AI圈顶流捧场!黄仁勋苏姿丰都来了,联想亮AI Now智能体大招,连甩10多个重磅AI产品
苹果突然发布新iPad mini!A17 Pro芯、8GB内存、支持苹果AI,3999元起
深度:OpenAI大清洗
苹果Vision Pro凉了?二季度销量暴降80%
车圈大模型落地竞速:从好用到易用,从尝鲜到常用
李国杰院士:诺贝尔物理学和化学奖为何偏爱人工智能?
AI短视频时代真的来了!零门槛上手,即梦AI喊话有奖创作
对标李飞飞!前华为美研CTO创业,要让机器人理解物理世界
海康威视回应千人裁员:经营策略调整,区域研发员工:过完年后就没业务
苏姿丰2小时激情演讲!发布AMD最强AI芯片,旗舰CPU单颗10万,OpenAI微软都来站台
爆火AI编程应用何以单挑微软?Cursor团队2小时访谈揭秘
苹果Vision Pro主导高管将退休!库克热门候选人接任
激活公共数据放大招!数据像房子一样登记,首个顶层设计文件来了
刚刚!诺贝尔化学奖颁给了谷歌DeepMind CEO
AI教父Hinton获诺奖后:谷歌CEO办庆功宴,奖金计划捐出,还Diss了一把阿尔特曼
诺贝尔物理学奖罕见一幕!“AI教父”意外获奖,物理圈傻眼
华为纯血鸿蒙首发实测!腾讯阿里力挺,打破苹果安卓垄断,对话高管揭秘研发细节
463亿!OpenAI官宣新融资,估值突破11000亿,AI超级巨无霸诞生
中国AI PC峰会最终议程揭晓!联想荣耀领衔,全面解构AI PC产业链重大创新与未来趋势
AI教育应用落地的首枪终于打响,但扣动扳机的居然不是GPT?
联想集团首席研究员颜毅强:面向大模型的个人计算体系和交互创新
杨立昆吴恩达李飞飞赢了!OpenAI躲过大劫,硅谷奔走欢庆
扎克伯格深度专访:痛批苹果,狂蹭英伟达,自曝全息AR眼镜烧了350亿
苹果坑惨OpenAI:最后一刻退出融资!阿尔特曼画的饼不香了?
OpenAI融资文件曝光!ChatGPT年收入涨4倍,月费5年内翻倍
开会这个技术活,让AI+RTE 玩出了新高度
首款具身智能工业机器人发布,机械臂困境的巧妙破题
OpenAI又爆新瓜!公司在重组,Ilya曾考虑回归,原CTO主张推迟产品发布
OpenAI三位同日离职高管起底!今年已失去13位高管
上海冲出一个百亿人工智能IPO!开盘大涨超80%
全息AR眼镜来了!扎克伯格现场开箱,黄仁勋首批体验,还有Llama 3.2大模型上新
突发!OpenAI CTO离职,CEO回应
扫地机器人长手又长脚,在家就能头皮护理,追觅新品全家桶一文看尽
AI产业落地规模中国第一!百度智能云三大AI产品重磅升级、多项能力业界首发
中国AI PC创新峰会定档10月11日!首批演讲嘉宾公布,联想首席研究员领衔
字节视频大模型杀死比赛!无缝镜头切换,运镜技巧拉满,音乐创作和翻译自由也实现了
腾讯发布轮足式机器人!能照顾老人,还会自我收纳
声网RTE2024 IoT专场议程出炉!旷视/小米/海马爸比等大咖分享 AI 智能硬件的多形态创新应用
美国商务部:禁用中国智能网联车技术,2027年生效
北京,冲刺人形机器人第一城
突发!曝高通拟收购英特尔
从消费电子到智驾智舱,多媒体应用全面爆发,安谋科技自研IP加速中国芯片创新
余承东亲自迎接三折叠首批用户!华为Mate XT全球首拆曝出诸多细节,苹果iPhone 16已破发
全球开源大模型新王!阿里Qwen2.5来了,性能跨量级超Llama3.1
把KTV“装进”一台K歌音箱,一家创企搞定了整个行业都没做成的事
26年,从中国“卷”到全球,科沃斯靠什么?
刚摸完苹果iPhone 16系列和手表耳机新品,真机和看图真不一样
分类
时事
民生
政务
教育
文化
科技
财富
体娱
健康
情感
旅行
百科
职场
楼市
企业
乐活
学术
汽车
时尚
创业
美食
幽默
美体
文摘
原创标签
时事
社会
财经
军事
教育
体育
科技
汽车
科学
房产
搞笑
综艺
明星
音乐
动漫
游戏
时尚
健康
旅游
美食
生活
摄影
宠物
职场
育儿
情感
小说
曲艺
文化
历史
三农
文学
娱乐
电影
视频
图片
新闻
宗教
电视剧
纪录片
广告创意
壁纸头像
心灵鸡汤
星座命理
教育培训
艺术文化
金融财经
健康医疗
美妆时尚
餐饮美食
母婴育儿
社会新闻
工业农业
时事政治
星座占卜
幽默笑话
独立短篇
连载作品
文化历史
科技互联网
发布位置
广东
北京
山东
江苏
河南
浙江
山西
福建
河北
上海
四川
陕西
湖南
安徽
湖北
内蒙古
江西
云南
广西
甘肃
辽宁
黑龙江
贵州
新疆
重庆
吉林
天津
海南
青海
宁夏
西藏
香港
澳门
台湾
美国
加拿大
澳大利亚
日本
新加坡
英国
西班牙
新西兰
韩国
泰国
法国
德国
意大利
缅甸
菲律宾
马来西亚
越南
荷兰
柬埔寨
俄罗斯
巴西
智利
卢森堡
芬兰
瑞典
比利时
瑞士
土耳其
斐济
挪威
朝鲜
尼日利亚
阿根廷
匈牙利
爱尔兰
印度
老挝
葡萄牙
乌克兰
印度尼西亚
哈萨克斯坦
塔吉克斯坦
希腊
南非
蒙古
奥地利
肯尼亚
加纳
丹麦
津巴布韦
埃及
坦桑尼亚
捷克
阿联酋
安哥拉