多模态竞争的下一站,正在从"识别"转向"推理"。近日,国内多家大模型团队在多模态评测中更新成绩,焦点集中在视觉推理、图表问答与长视频理解三项能力上。与早期"这张图里有什么"的描述型任务不同,新一阶段的评测要求模型"看图算数、读表比较、看视频找因果",难度显著提升。
视觉推理之所以成为分水岭,是因为它直接对应真实工作场景。一张财报截图里,模型不仅要认出"营收""净利润",还要跨列计算同比、识别单位是万元还是亿元、判断图表趋势与文字描述是否一致;一段产品演示视频里,模型要定位关键操作步骤并复述顺序。这类任务考验的是视觉编码器与语言推理的深度融合,而非简单的图像分类。业内普遍认为,能否稳定处理多步视觉推理,是判断一个多模态模型"能不能干活"的关键指标。
开源侧的动作同样值得关注。DeepSeek系列以高性价比著称,其多模态方向的探索被视为"能力下放"的重要信号——一旦开源模型在视觉理解上追近闭源产品,中小企业和开发者就能以更低成本搭建文档解析、质检、教育辅导等应用。DeepSeek此前在推理效率上的优化思路,也被认为会延续到多模态场景,例如通过更高效的视觉token压缩降低长视频与高分辨率图像的处理成本。
闭源阵营则在场景深度上做文章。豆包把多模态推向实时视频通话,强调"边看边聊"的交互体验;通义千问聚焦文档与图表,主打办公生产力;Kimi用长上下文承接长视频与多页图文;智谱清言把GUI理解作为智能体感知底座。可以看到,头部产品不再追求"全能",而是围绕各自生态选择主攻方向:字节有内容与硬件入口,阿里有办公与云服务,月之暗面有长文本心智,智谱有B端API与企业客户。
评测体系的演变也在推动竞争。国内多个多模态基准近期增加了中文场景题目,覆盖票据、表格、教材插图、中文手写体等本土化内容,这与英文主导的早期基准形成差异。对厂商而言,中文OCR、版式还原、中文图表习惯(如万元单位、千分位、合并单元格)都是必须啃下的细节,这些"脏活累活"恰恰决定了产品在真实用户手中的可用性。
成本仍是绕不开的话题。高分辨率图像与长视频意味着海量视觉token,推理开销远高于纯文本。如何在保证精度的前提下压缩视觉token、做好动态分辨率调度,成为各家工程能力的试金石。有观点认为,多模态API价格在接下来一段时间仍有下探空间,而端侧小模型的视觉能力也会同步增强,形成"云端重推理、端侧轻感知"的分工。
对行业用户来说,当下选择多模态方案的实用建议是:先明确场景——是实时交互、文档解析还是视频检索;再验证短板——用自家真实数据做小样本测试,重点看数值读取与多步推理的准确率;最后算总账——把调用成本、人工复核成本与错误代价一起纳入考量。多模态已经过了"看demo惊艳"的阶段,接下来拼的是稳定、便宜、可集成。视觉推理这场新战场,才刚刚开始。
标签:视觉推理,多模态评测,DeepSeek,图表理解,开源模型
