视频正在成为大模型竞争的新战场。文本、图像之后,能否真正“看懂”一段几十分钟的视频,成了检验多模态能力的试金石。近日我们选取了字节豆包、阿里通义千问与智谱清言三款国产多模态产品,用同一批测试素材做了一轮横向对比,重点考察长视频摘要、画面细节问答与字幕生成三类任务。
测试素材是一段约32分钟的科技发布会实录,包含产品演示、PPT切换、多人对话和现场演示画面。第一个任务是要求模型输出带时间戳的结构化摘要。豆包的表现最为完整,能够按章节切分内容,并准确标注出“第12分钟演示语音助手”这类关键节点,摘要层级清晰;通义千问同样给出了章节化输出,但对两处产品名称的识别出现偏差,把型号数字念错;智谱清言的摘要更偏概括,时间戳精度较弱,但对发布会整体逻辑的归纳反而更连贯。
第二个任务是画面细节问答。我们提问“演示环节中手机上出现了哪些应用图标”“演讲者身后的屏幕上第二页PPT的标题是什么”。豆包在图标识别上答出了大部分常见应用,并给出图标颜色与位置描述;千问对PPT标题的识别准确率较高,能读出小字号的副标题;智谱清言在细节题上明显保守,遇到模糊画面会主动说明“画面分辨率不足,无法确认”,这种“知道自己在哪不确定”的表现,在实用性上反而加分。
第三个任务是实时字幕与说话人区分。三者均支持视频转写,但在多人对话场景下差异明显。豆包能够按音色区分说话人并标注“发言人1/2”,转写准确率在安静段落接近可用水平;千问的转写在专业术语上更稳,但说话人切分偶尔串行;智谱清言的字幕时间轴对齐较好,适合直接导出做剪辑参考。需要指出的是,三款产品在背景噪声较大的现场演示段落都出现了不同程度的漏字,距离“直接可用”仍有距离。
从底层能力看,这一轮比拼的其实是视频帧采样策略、长上下文窗口与语音识别模块的协同。豆包依托字节在多模态与视频理解上的积累,长视频处理更偏向工程化落地;通义千问延续了Qwen系列在多模态上的均衡路线,图文问答是强项;智谱清言则在推理与自我校验上体现出GLM系列的一贯风格。三者的共同短板是长时间跨度的“记忆”仍会衰减,超过40分钟的视频,关键信息召回率明显下降。
对普通用户而言,选择建议可以更直接:要快速出会议纪要和章节摘要,优先豆包;要做课件、PPT内容的精细问答,千问更稳;要在剪辑流程里做字幕对齐和逻辑梳理,智谱清言的输出更规整。随着视频生成与视频理解双向推进,多模态大模型的下一轮竞争,很可能就从“看懂一段视频”开始。
标签:多模态大模型,豆包,通义千问,智谱清言,视频理解
