火山引擎大模型家族全面升级，“好模型+低成本”促进AI技术普惠

财富 2024-12-29 10:24 北京

火山引擎接连抛出重磅消息，近半年时间分别将大语言模型、视觉理解模型推进“厘时代”。此次火山引擎除了模型价格优势格外引人瞩目外，多模态大模型家族亦实现全面升级，首秀豆包视觉理解模型和3D模型，升级通用语言模型、音乐模型、文生图模型等产品。

火山引擎总裁谭待表示，期待通过“好模型+低成本”满足企业客户更广泛的需求，并且能够赋能不同行业的AI应用创新，推动实现AI技术普惠。

“全能型”多模态大模型升级，多项性能行业领先

经历了文本和语言大模型的探索，今年增强多模态能力成为大模型领域的关键议题。在近期火山引擎Force大会上最新亮相的豆包大模型支持更丰富的多模态交互，实现文本、图像、视频、音频等多种模态的输入、推理和生成。

其中视觉理解模型是最重要的AI基础模型之一。国开证券研报称，人类接受的信息超过80%来自视觉，视觉理解将进一步拓展大模型的能力边界，降低大模型交互门槛，解锁更多应用场景。

火山引擎研发的视觉理解模型对视觉内容有更强的识别能力，更强理解和推理能力，以及更细腻的视觉描述能力。

具体而言，豆包视觉理解模型能够识别图像知识、动作情绪、位置状态、中国传统文化、文字信息等内容，亦具有更强的文字符号识别能力（OCR）和对视觉内容中呈现的知识、文化背景、状态、情绪、数量、性质、位置等信息有更好的识别能力。在此基础上，该模型可以更好地基于指令进行视觉内容识别，并对中国传统文化信息有更强的理解。

在准确识别多模态输入内容之后，需要进行理解和推理。豆包视觉理解模型通过理解视觉内容中的文字、图像、图表等信息，能够进一步进行参考问答、总结摘要、以及进行数学、逻辑、代码等推理。

同时该模型具有更细腻的视觉描述和创作能力，即基于图像信息，更细腻地描述图像呈现的内容，并可对图像内容和状态进行产品介绍、宣传文章、视频脚本、故事诗歌等多种文体的创作。该模型能力的提升将直接助力学科教育、儿童陪伴、门店管理、手机助手、自动驾驶、电商购物等不同行业。

豆包文生图模型也发布重要升级，在业界率先实现“一句话P图”“一句话生成海报”功能，极大拓展模型的应用范围。

音乐模型从生成60秒的简单结构，升级到生成3分钟的完整作品。vivo今年10月发布的OriginOS 5系统已经搭载豆包音乐模型，该模型可根据用户提供的素材进行AI词曲创作，提供版权音乐、AI纯音乐等多种音乐选择，为用户生成独一无二的个性化大片。

豆包3D生成模型同样首次亮相，支持文生、图生及多模态生成，1分钟精准生成高保真高质量3D资产。该模型与火山引擎数字孪生平台veOmniverse结合使用，可以高效完成智能训练、数据合成和数字资产制作，成为一套支持 AIGC 创作的物理世界仿真模拟器。

据了解，2025年春季将上线豆包视频生成模型1.5版，支持更长视频的生成。另外，豆包端到端实时语音模型也将很快上线，将解锁多角色演绎、方言转换等新能力。

总裁谭待表示，目前豆包大模型已成为国内最全面、技术最领先的大模型之一。

智源研究院最新发布的大模型综合及专项评测结果显示，在覆盖国内外100余个开源和商业闭源大模型的评测中，豆包通用模型pro获得大语言模型主观评测最高分；在多模态模型评测中，豆包视觉理解模型排名视觉语言模型第二，成绩仅次于GPT-4o；豆包文生图模型、豆包视频生成模型（即梦P2.0 pro）也分别在相应测试中获得全球第二。

光大证券研报分析，相较于传统单一模式的AI相比，豆包多模态模型能够更全面地理解复杂场景，并准确地结合产品设计匹配用户需求，有望带来更加智能和个性化的体验。体现在用户端数据方面，豆包通用模型的日均tokens使用量已超过4万亿，较七个月前首次发布时增长了33倍。近3个月中，豆包在信息处理、客户销售、终端硬件、 AI工具等场景调用量分别增长39倍、16倍、13倍、9倍。

以技术优化成本，促进AI技术普惠

火山引擎为企业提供高性价比的多模态大模型，以更低成本推动AI技术普惠和应用发展。升级的通用大模型Doubao-pro能力全方位对齐GPT-4o，价格只有后者的1/8；豆包视觉理解模型千tokens输入价格仅为3厘，一元钱就可处理284张720P的图片，比行业价格便宜85％。

艾媒咨询CEO张毅认为，低价必然对企业或者对客户必然有一定的吸引力，客户更需要的是性价比，即性能卓越且价格公道，能否平衡好产品性能是最重要的。

对于火山引擎而言，大幅降价是可持续性的战略选择。谭待解释称，即便3厘/千tokens的价格，公司仍然能有合理的毛利。对于2B业务，如果毛利是负的，规模越大亏损越多，商业模式是不成立的。能做到这个价格其实是火山引擎模型技术能力、工程能力、软硬件结合能力的体现。比如算法上预训练阶段的特别优化工程上的错峰和混部，大规模的P/D推理分离，硬件优化等等。

技术先行，才能做好服务。谭待指出，豆包大模型从一开始，就确定了要同时为两个目标优化：更高的智能和更高的效率，以及对应的最低的成本。另外火山引擎在商业策略上，价格透明，不做高刊例低折扣，一步到位，让更多开发者和企业都用得起。放眼全球，OpenAl、Gemini都在不断优化效率，持续降价、降低客户成本。“我们也是真心希望，好模型+低成本，能让AI普惠更多客户尤其是个人开发者和中小企业。”

光大证券研报判断，强竞争力的定价或使得行业均降价，有望推动AI技术普惠和应用发展。

从实践来看，随着多模态模型能力提升，豆包大模型家族的应用场景也在不断拓展，渗透到金融、医疗、建筑、教育、体育和物流等细分行业。

目前豆包大模型家族通过字节跳动旗下云服务平台火山引擎面向企业提供服务，已经经过字节跳动内部50余个真实业务场景实践验证，超30个行业外部企业深度共创，豆包大模型适配多种业务场景，激发企业增长潜能。

诸多领域已经取得显著效果，例如梅赛德斯-奔驰利用火山引擎AI大模型提升智舱信息检索能力及智舱系统反应速度，扩展智能应用场景、提升智舱研发速度；OPPO通过与火山引擎的合作，成功推出“小晴” “文锋”、AI面试官、AI英语老师等四个AI智能体；海尔消金联合火山引擎实现90%以上的业务场景智能化，业务场景的智能化大幅提高了业务自动化水平和个性化服务的能力。

据统计，豆包大模型已经覆盖80%汽车品牌和国内主流手机、PC等3亿台智能终端，来自智能终端的豆包大模型调用量在半年时间内增长100倍。

AI技术持续演进，多模态大模型加速落地，深入应用到更复杂的消费场景中，未来还将释放更大的商业价值。

新媒体编辑：徐铮

中国网财经官方微信（ID：zgwcjzx）

中国网财经

拥有中央权威新闻采编渠道、即时全方位理财数据资源，致力于提供独家原创、简明快捷的财经新闻资讯，以财经、证券、理财、产业、消费、基金、银行、保险、期货等子频道为主推品牌，打造中国互联网中央财经门户。

最新文章

建设全国统一大市场，国家发改委出手→

多地断货！“抗流感神药”价格大涨，专家提醒

今天抵达！这波很猛

关于人民币汇率，央行释放明确信号→

加油站“偷油”曝光，每加一箱油被偷走1.5升！如何监管？

99%以上为甲流！多地疾控紧急提醒

iPhone 16，跌破5000元

央行发声！建议择机降准降息

男子5元卖早高峰地铁座位，后续来了→

国家发改委重磅发声：买手机、平板等数码产品，将有补贴！

“特种兵式存款”又火了！利率高至3%

冲上热搜！苹果突然降价，最高立省800元！“能否退差价”，回应来了→

中途离职还有年终奖吗？法院是这么判的

雷军：明年目标30万辆！谈小米股价，回应“雷军许愿池”

降价超80%！立即生效！

2024年A股收官！沪指全年上涨12%，您收益如何？

明起存量房公积金贷款将执行新利率

网传医保卡里的钱没用完年底会“清零”？谣言！

买票更方便了！春运期间12306试点推出新功能

火山引擎大模型家族全面升级，“好模型+低成本”促进AI技术普惠

个人所得税专项附加扣除马上截止还不会填报？快来学

陈梦、樊振东退出排名，WTT最新回应

一国有大行公告：下调！

苏州银行“伴飞贷”入选苏州工业园区“名行优品”

官宣！低空司，来了

共享电单车，多个城市“不鼓励”

长寿时代，看一家中外合资险企如何重塑养老新格局？

转发+收藏！铁路春运购票日历来了！

第五次全国经济普查结果出炉

临近年底，多家银行消费贷利率降至“2字头”→

事关房地产！住建部明年重点在这几方面发力

让信用不负期待——招联 “信用故事/人物征集”

个人养老金账户为何“被开户”？能销户吗？银行回应

适当提高退休人员基本养老金，财政部重磅发声！

明年如何“稳住楼市”？如何贯彻落实？专家解读

多家银行，历史新高！

买了机票为啥还得再买座？航司“锁座”引争议

B站举办国创发布会，《凡人修仙传》《中国奇谭2》最新消息公布

金价起伏跌宕，未来何去何从？

增资！A股利好来了

深圳公积金，大消息！

中国工程院院士、中国医学科学院院长王辰：吸烟是对民众健康最大的危害之一

LPR报价保持不动，原因几何？

破解小微企业融资难题深圳农商银行扎实推进小微企业融资协调工作机制显实效

买不如租？租赁经济悄然升温

冲上热搜！金饰价格跌破800元/克……

兴银理财开业五周年：五载奋进凝心聚力初心如磐行稳致远

多地官宣将“取消公摊”，专家：可提高购房品质，增强购房积极性

工商银行升级推广个人养老金智能化服务

今晚，年内油价最后一调！

分类

时事

民生

政务

教育

文化

科技

财富

体娱

健康

情感

旅行

百科

职场

楼市

企业

乐活

学术

汽车

时尚

创业

美食

幽默

美体

文摘

原创标签

时事社会财经军事教育体育科技汽车科学房产搞笑综艺明星音乐动漫游戏时尚健康旅游美食生活摄影宠物职场育儿情感小说曲艺文化历史三农文学娱乐电影视频图片新闻宗教电视剧纪录片广告创意壁纸头像心灵鸡汤星座命理教育培训艺术文化金融财经健康医疗美妆时尚餐饮美食母婴育儿社会新闻工业农业时事政治星座占卜幽默笑话独立短篇连载作品文化历史科技互联网

发布位置

广东北京山东江苏河南浙江山西福建河北上海四川陕西湖南安徽湖北内蒙古江西云南广西甘肃辽宁黑龙江贵州新疆重庆吉林天津海南青海宁夏西藏香港澳门台湾美国加拿大澳大利亚日本新加坡英国西班牙新西兰韩国泰国法国德国意大利缅甸菲律宾马来西亚越南荷兰柬埔寨俄罗斯巴西智利卢森堡芬兰瑞典比利时瑞士土耳其斐济挪威朝鲜尼日利亚阿根廷匈牙利爱尔兰印度老挝葡萄牙乌克兰印度尼西亚哈萨克斯坦塔吉克斯坦希腊南非蒙古奥地利肯尼亚加纳丹麦津巴布韦埃及坦桑尼亚捷克阿联酋安哥拉