近日,国产大模型阵营在多模态赛道上明显加快节奏。与过去一年主要集中在文本对话能力不同,这一轮升级的重心正转向“看得懂、听得清、说得准”——图像、视频、语音与文本的统一理解成为各家竞争的焦点。从DeepSeek、智谱清言、Kimi到通义千问、豆包,几乎每一家都在近期拿出了新的多模态能力,并且开始强调真实场景中的落地效果。
先说DeepSeek。作为以推理能力见长的团队,其多模态方向一直较为克制,但最新版本中图像理解能力已明显补强,尤其是在图表解析、公式识别和文档截图理解上表现突出。对于开发者而言,这意味着可以把包含表格、流程图、数学公式的PDF或截图直接交给模型处理,而不必先做OCR再拼接文本。这一能力在教育、科研和金融研报处理场景中价值巨大,例如把一份带图表的行业报告截图输入,模型可以直接归纳趋势并指出数据异常点。
智谱清言则在多模态交互上走得更远。其GLM系列持续迭代视觉理解模块,强调对中文场景的适配,比如识别中文菜单、发票、手写便签、商品包装等本土化内容。近期智谱方面还加强了智能体与多模态的结合,用户上传一张图片后,模型不仅能描述内容,还能调用工具完成后续操作,例如识别商品图片后比价、识别行程单后整理日程。这种“感知+执行”的组合,正是多模态从演示走向实用的关键一步。
Kimi的路线则聚焦长上下文与多模态的结合。月之暗面此前以超长文本处理闻名,近期在多模态上补足了图片与文档混合输入的能力。实际体验中,用户可以把几十页带图的PDF、PPT截图和网页链接一次性投喂,模型能在长文档中定位图片、交叉引用文字与图表信息。这对法律、咨询、投研等需要处理大量图文材料的行业来说是刚需。Kimi的策略并不是追求单张图片的极致识别,而是强调在海量图文材料中保持上下文连贯,这与其长文本定位一脉相承。
通义千问在多模态上布局最为全面。阿里方面持续开源视觉语言模型系列,覆盖从端侧小模型到云端大模型的多个尺寸,并且强调视频理解能力。近期千问在多模态评测中的表现稳定,尤其在中文场景的文字识别、表格理解和视频内容问答上有明显优势。对开发者来说,开源意味着可以私有化部署,在电商商品图审核、工业质检图像分析、教育题目批改等场景中直接集成。视频理解方面,千问支持对较长视频进行分段摘要与关键帧定位,可用于会议录像整理、监控片段检索等应用。
豆包则依托字节跳动的内容生态,在多模态生成与理解上双线推进。其视觉理解能力与图像生成能力结合紧密,用户在对话中可以直接生成图片、修改图片,再让模型对结果进行分析。近日豆包在端侧多模态上也有动作,强调低延迟的实时视觉交互,适合移动端拍照问答、实时翻译、学习辅导等场景。字节系产品一贯擅长C端体验,豆包在多模态交互的流畅度和趣味性上具备优势,这对推动普通用户养成“拍照问AI”的习惯很有帮助。
从技术趋势看,这一轮多模态升级有三个共同特征。第一是从“看图说话”走向“图文推理”,模型不再只描述图片内容,而是能结合问题进行逻辑推断,比如从一张财务报表截图中计算增长率、从实验照片中判断操作是否规范。第二是视频理解成为新战场,静态图片的天花板已经显现,而视频包含时序信息,对模型的计算与理解能力提出更高要求,千问、豆包等已在视频问答上投入资源。第三是端侧与云侧协同,小尺寸多模态模型被压缩后部署到手机、车机、摄像头等终端,实现低延迟的本地感知,云侧大模型负责复杂推理,这种分工正在成为行业共识。
当然,挑战同样明显。多模态模型的幻觉问题比纯文本更难发现,模型可能“看到”图片中并不存在的文字或物体;长视频理解的计算成本仍然很高;中文场景下的手写体、票据、方言语音等特殊数据仍是难点。此外,多模态能力如何转化为可收费的产品功能,也是各家需要回答的商业化问题。
总体来看,国产多模态大模型正从技术演示阶段进入场景落地阶段。DeepSeek补强文档视觉理解、智谱探索感知与执行闭环、Kimi深耕长图文材料、千问推进开源与视频理解、豆包发力端侧交互,路线各有侧重。接下来的竞争,将不再只是榜单分数,而是谁能真正把“看得懂”变成用户愿意付费的实用能力。对于开发者和企业用户而言,现在正是评估各家多模态接口、着手场景试点的时间窗口。
标签:多模态大模型,DeepSeek,通义千问,豆包
