坚持不做Sora,百度为何又开始重视多模态大模型?
创始人
2025-05-21 14:27:21
0

界面新闻记者 | 肖芳

界面新闻编辑 | 文姝琪

百度正在强化文心大模型多模态理解能力

百度AI Day百度集团副总裁吴甜详细解释了其最新发布的两款模型文心大模型4.5 Turbo和深度思考模型X1 Turbo技术创新之处。

表示文心大模型4.5和4.5 Turbo实现了文本、图像和视频的混合训练。针对不同模态数据在结构、规模、知识密度上的差异,通过多模态异构专家建模、自适应分辨率视觉编码、时空重排列的三维旋转位置编码、自适应模态感知损失计算等技术,大幅提升跨模态学习效率和多模态融合效果,学习效率提高近2倍,多模态理解效果提升超过30%。

文心大模型4.5于今年3月16日正式发布,是百度首个原生多模态大模型。文心大模型4.5 Turbo在上个月举办的Create 2025百度AI开发者大会上对外发布,相比文心大模型4.5,其速度更快,价格下降80%,每百万token的输入价格仅为0.8元,输出价格3.2元,仅为DeepSeek-V3的40%。

去年,百度CEO李彦宏多次公开表示,Sora这种视频生成模型无论多火爆,百度都不去做。他给出的理由是,多模态模型尤其是视频生成领域,幻觉问题尚未解决,这限制了大规模应用。

但字节跳动和阿里巴巴却没有因为幻觉问题停止布局多模态大模型的脚步:去年12月,字节跳动正式对外发布豆包视觉理解模型、豆包3D生成模型;今年9月和12月,阿里通义千问团队分别对外发布视觉理解模型Qwen2-VL和多模态推理模型QVQ-72B-Previe

从市场反馈来看,这几款模型在处理自然语言与图像信息的结合上灵活性强,能精准识别图像中的内容受到教育自动驾驶领域企业的关注,在视觉-语言融合场景中展示出较大的潜力。

这意味着此前百度多模态大模型上存在一些误判多模态模型布局竞争对手晚了数月

百度正在积极补齐大模型布局短板

今年年初DeepSeek走红让外界再次讨论百度大模型领域是否再次陷入了“起个大早,赶个晚集”的尴尬境地

2021百度对外发布文心大模型行业属于最早一批布局大模型公司经过几年发展百度大模型领域不仅没能保持先发优势还在开源降价多模态问题出现误判

界面新闻多位百度内部人士了解今年第一季度总监会李彦宏去年内部没有提到模型开源导致百度走了一些弯路

DeepSeek走红之后百度此前关于开闭源问题进行纠偏今年新发布文心大模型4.5系列将于630正式开源

降价问题去年豆包通义大模型相继大幅降低调用价格之后文心大模型的主力模型并未进行跟进直到今年Create 2025百度AI开发者大会百度正式宣布文心大模型4.5 Turbo文心大模型X1 Turbo价格大幅降低

然而今年基础大模型竞争焦点价格一位大模型从业者看来基础信息处理能力的提升以及成本的下降让豆包通义几款大模型去年获得了快速增长。深度推理能力视觉推理能力以及Agent相关技术将成为今年未来几年基础大模型竞争关键

在当下的竞争态势下百度放弃此前纠结,积极布局多模态大模型不难理解了文心大模型4.54.5 Turbo文心大模型X1X1 Turbo模型性能提升的同时,多模态能力也进一步增强。

根据百度方面介绍文心大模型4.5Turbo多模态能力与GPT 4.1持平,不仅具有图片理解能力,还能听懂、看懂音视频内容文心大模型X1 Turbo具备跨工具调用能力,能整合搜索引擎、数据库等外部资源完成复杂任务。在多模态交互场景中,这种工具调用能力与多模态能力相融合,使其能够更灵活地应对各种实际问题

李彦宏Create 2025百度AI开发者大会谈及布局多模态大模型价值DeepSeek也不是万能的,它只能处理文本,还不能理解和生成图片、音频、视频等多媒体内容很多客户都需要这种多模理解和生成能力

对于李彦宏此前一直纠结幻觉问题吴甜此次百度AI Day进行重点阐释百度研制了自反馈增强的技术框架,基于大模型自身的生成和评估反馈能力,实现了“训练-生成-反馈-增强”的模型迭代闭环,让大模型拥有了自我迭代能力,显著降低了模型幻觉,模型理解和处理复杂任务的能力大幅提升。

虽然过去诸多判断进行纠偏不可否认百度在大模型已经脱离第一梯队。很多业内人士判断未来基础大模型领域将只剩下DeepSeek豆包通义三强争霸这种竞争格局百度想要翻盘面临挑战不言而喻

数字人能否助力百度翻盘?

百度积极布局多模态大模型除了当下市场竞争需要之外另一个重要原因多模态大模型承载百度AI应用期待

去年以来李彦宏多次公开场合强调技术的商业价值在他看来一个没有明确用途的AI模型,不过是一个吸引人的计算机科学展示。没有应用,芯片、模型都没有价值。模型会有很多,但未来真正统治这个世界的是应用

今年以来AI应用领域创业如火如荼AI办公AI搜索Agent都是热门AI应用落地方向李彦宏不一样判断他在Create 2025百度AI开发者大会上表示,AI数字人年最令人激动的突破性应用。声形超拟真、内容更专业、互动更灵活数字人,实现超越真人的体验,在电商直播、游戏、消费等领域,有着巨大的想象空间。

百度AI Day吴甜透露百度数字人方面布局百度研制了“剧本”驱动多模协同的超拟真数字人技术,实现了语言、声音、形象的协调一致。目前这套技术已经支持超过10万数字人主播,直播转化率达31%,降低80%直播开播成本。

也有一些从业者数字人不同声音尤其是一些电商商家,尝试数字人直播之后,发现真实的直播带货效果不尽如人意。一家美妆类的商家此前告诉界面新闻,其从去年开始尝试数字人直播带货,但数字人回复用户留言时不仅生硬,还会出现答非所问的情况,不仅没有带来更高的转化率,还引发了更多消费者投诉 【下载黑猫投诉客户端】。

在数字人服务商世优科技CEO纪智辉看来,目前数字人直播带货并不好做,抖音快手等平台的出发点依然是更好的内容和体验。“如果用户在平台上刷到10个短视频有9个都是数字人,这会破坏平台的内容生态,各个平台都对数字人直播进行严格管控也是意料之中的事。”

不过这些不同声音没有阻止百度积极布局数字人脚步根据百度此前公布信息百度与罗永浩达成合作,联手打造罗永浩的数字人形象用于直播带货,并于5月23日晚8点在百度电商开启首场直播

罗永浩数字人首场直播带货成绩有待观望。如果数据不错,或许能改变一些商家数字人直播带货态度能给百度带来多大商业价值仍然需要时间验证

相关内容

热门资讯

金龙汽车:选举陈锋为公司董事长 人民财讯5月21日电,金龙汽车(600686)5月21日晚间公告,公司召开董事会会议审议通过相关议案...
本轮巴以冲突已致加沙地带536... 当地时间5月21日,加沙地带卫生部门发布声明称,过去24小时,共有82名死者和262名伤员被送往加沙...
清远整治物业违规问题!举报电话... 转自:清远发布物业服务“打折扣”?小区公共收益不透明?......为解决物业服务领域的问题,即日起,...
三湘印象(000863.SZ)... 格隆汇5月21日丨三湘印象(000863.SZ)公布,2025年5月20日,三湘控股收到联投置业的《...
事关湖南体育中考!总体方案发布 转自:永州发布湖南体育中考即将“升级”!近日,湖南省教育厅正式印发《湖南省初中学业水平体育与健康科目...
上交所:试点开展公司债券续发行... 上交所发布关于试点公司债券续发行和资产支持证券扩募业务有关事项的通知,自发布之日起施行。其中提出,本...
中国七部门:到2027年,中国... 中新社北京5月21日电 (记者 阮煜琳)中国生态环境部、国家发改委等七部门印发的《美丽河湖保护与建设...
金融监管总局等八部门:引导银行... 蒋立冬 派生万物AI 图5月21日,国家金融监督管理总局、中国人民银行、中国证监会、国家发展改革委等...
万科:拟以不超60亿元万物云股... 观点网讯:5月21日,万科A发布公告,称已与深圳地铁集团签署了一份不超过人民币42亿元的借款合同,并...
市领导率队赴湘江新区开展“法治... 稿源:掌上长沙2025-05-21 19:32 长沙晚报掌上长...
黄金股票ETF大涨点评 每经编辑|肖芮冬     5月21日,A股三大指数集体收涨。截至收盘,沪指涨0.2...
香港立法会通过《稳定币条例草案... 中新社香港5月21日电 (记者 刘大炜)香港特区立法会21日三读通过《稳定币条例草案》,以在香港设立...
青云科技:三股东拟减持,最高减... 2025年5月22日,青云科技发布关于持股5%以上股东及其一致行动人减持股份计划公告。公告显示,嘉兴...
上海美琪大戏院回归,开幕大戏《... 转自:上观新闻5月21日,上海美琪大戏院正式回归。作为“SEE YOU IN SHANGHAI上海见...
承担重任!8家核电企业名单公布 转自:中国能源报5月21日,国家能源局发布的《关于委托中国核工业建设股份有限公司等单位承担核电工程定...
奥比中光:关于董事辞职暨选举职...   炒股就看金麒麟分析师研报,权威,专业,及时,全面,助您挖掘潜力主题机会! 奥比中光科技集团股份...
市场监管总局:积极鼓励粤港澳三... 市场监管总局提出,进一步扩大“湾区标准”覆盖面,在现有领域的基础上,进一步向人工智能、低空经济、新能...
鞍山命案嫌犯潜逃22年靠打游戏... 转自:今晚报 【#鞍山命案嫌犯潜逃22年靠打游戏为生#】...
西麦食品:截至2025年5月2... 证券日报网讯西麦食品5月21日在互动平台回答投资者提问时表示,根据中国登记结算公司深圳分公司提供的数...
“峰会+训练营”促进上下游协同... 转自:上观新闻5月21日,“创新生态·专业发展”2025海洋创新园具身智能机器人峰会暨第三届海客训练...