多模态GEO前瞻:图片与视频内容如何被大模型理解引用
一家做工业门的企业,产品册做得相当漂亮。三十六页,全是高清实拍:厂房外观、门体结构、电机细节、安装现场。市场部为这本册子花了三个月,销售拿去给客户看,反馈也很好。问题出在另一个地方。有客户在AI里问"冷库用的快速卷帘门,开关速度一般多少,有哪些厂家能做",AI给出的答案里没有这家公司。市场部自己试了几次,发现AI只在提到"工业门"这个大类时偶尔带上他们,具体到冷库、速度、密封等级这些参数,一个字都没有。
原因不复杂:这本册子里最关键的信息,全部长在图片上。参数表是一张设计过的图,工艺说明是图上的艺术字,安装案例是九宫格照片。人看得懂,机器读不出来。而在多模态能力快速进步的今天,"读图"已经不是能不能的问题,而是读得多细的问题。这个变化,正在重新定义什么叫"内容做得好"。
一、机器已经开始看图,只是看得比人挑剔

过去两年,主流大模型的多模态能力进步很快。它们能识别图片里的物体、场景、文字,能回答"这张图里有什么""这个设备大概是什么类型",能对图表做简单的趋势描述,也能从视频里抽取关键帧、结合字幕和语音转写理解内容。这意味着,企业过去那些"只给人看"的视觉素材,现在有了第二次生命——前提是它们能被读懂。
但机器的"读"和人不一样,它挑剔在几个地方。第一,它依赖清晰的文字。图片里的文字如果压在复杂背景上、用了花哨字体、竖排或者艺术变形,识别率会明显下降。第二,它依赖上下文。一张单独的产品图,机器只能判断"这是个金属门",如果图注里写了"适用于零下二十五度冷库、开启速度每秒多少米",判断就会精确得多。第三,它依赖一致性。图文不符时,机器倾向于相信文字,但会对整篇内容打折扣。
这就解释了一个常见现象:很多企业的视觉素材质量很高,但在AI答案里几乎没有存在感。不是素材不好,是素材里没有"可被提取的信息"。一张漂亮的车间照片,传播价值很高,信息价值接近零;一张带标注的工艺流程图,审美上也许平庸,却是模型最愿意引用的素材。
二、"被引用"的方式正在变化
理解多模态,关键不是"AI能不能看图",而是"AI在什么情况下会引用一张图或一段视频"。
在图文混排的答案里,图片的角色通常是佐证。当模型要回答"某类设备的安装方式",如果检索到的内容里有一张带说明的安装示意图,它更有可能把这个来源列为支撑材料,甚至在支持多模态输出的产品里直接把图展示出来。这时候,图片承担的是"可信度凭证"的功能,而不是装饰。
视频的情况更微妙。模型对视频的理解,目前主要依赖三条线索:字幕文本、语音转写、关键帧画面。也就是说,一段三分钟的产品演示视频,如果全程只有背景音乐、没有口播、没有字幕、封面也没有说明,那么它对模型来说几乎是一片空白。反过来,同样一段视频,如果口播里把品牌名、产品型号、适用场景、关键参数都说清楚,并且配了字幕,它就可能成为模型理解这家企业的重要素材。
这套逻辑在文旅行业体现得格外明显。一家做本地深度游的公司,最值钱的素材是线路图、实景照片、行程视频。过去这些素材发在公众号里,靠人转发;现在它们可能被用户一句"某某地方两天怎么玩"唤起。如果图片只有风景没有人文说明,视频只有配乐没有讲解,模型很难判断这条线路适合谁、需要几天、什么季节合适、有什么限制条件。而一旦这些信息被写出来,同一批素材就变成了可以被反复调用的答案素材。
还有一个容易被忽略的点:图表。行业报告、白皮书里的数据图,如果只是导出成图片,机器只能看到"一张柱状图",读不到具体数值和结论。而如果图表下方配了文字说明,把关键结论写出来,比如"某类设备的能耗在三种工况下的对比关系",这段文字就成了可被引用的内容。做市场的人常犯一个错误:把结论画成图,然后把文字删掉。这在多模态时代是自断粮道。
三、图片和视频要被引用,得过三道关
第一道关是可识别。这是最基础的一层,也最容易被忽视。具体要求不复杂:图片分辨率足够、文字与背景对比清晰、避免大面积艺术字、关键信息不要只存在于图片里。产品图的文件命名也要规范,不要用"IMG_20231105_001"这种机器无法理解的名字,改成"冷库快速卷帘门-安装现场-侧视图"这样的描述性命名,对检索有实际帮助。网页端的图片说明文字(alt文本)同样重要,它是机器读取图片的第一入口。
第二道关是可理解。机器看懂"这是什么"之后,还要知道"这有什么用"。这一步靠的是围绕素材的文字说明。一张设备图,配一句"该型号适用于粉尘环境,防护等级满足车间冲洗要求",机器就能把图和场景关联起来。一段客户访谈视频,配一段文字摘要把客户所在的行业、解决的问题、使用效果写清楚,视频才真正进入内容体系。很多企业有大量优质视频素材躺在硬盘里,问题就出在没有做这一步"翻译"。
第三道关是可溯源。模型在组织答案时,对来源的权威性和一致性有隐性判断。同一张图如果出现在十个不同账号上,且没有任何出处说明,可信度会被稀释;如果这张图首发于企业官方账号,并被行业媒体引用,可信度就高得多。视频尤其要注意首发时间、发布账号、内容一致性。有些企业把同一段素材裁剪成十几个版本到处发,短期看是曝光,长期看是在制造信息噪音。
松点科技在给客户做内容诊断时,会专门看一类问题:企业最有价值的信息,是不是被"锁"在了图片和视频里。他们的处理方式是把这些素材做二次结构化——把图里的参数转成文字、把视频里的口播转成文稿、把图表里的结论写成段落,再通过松点文通做全域分发。这个动作看起来笨,但它是多模态时代最实在的基本功。
四、从今天开始整理多模态素材库
如果你认同这个判断,可以从四件小事开始,成本都不高。
第一件,做一次素材盘点。把现有的产品图、现场图、工艺图、演示视频、客户访谈、展会记录全部列出来,标注三个信息:这张素材里有没有关键文字、有没有参数、有没有场景说明。盘点完你会发现问题集中在哪:通常是现场图和视频最多,可用信息最少。
第二件,给核心素材补"文字骨架"。挑出二十张最重要的图和五段最重要的视频,为每一份补一段一百字左右的说明,写清四件事:这是什么、用在哪、有什么特点、谁在用。这段文字要能独立成段,不要写"如图所示"这种依赖上下文的表述。
第三件,改造图表的生产流程。以后做任何图表,都要求在图下方附一段结论性文字,把图里的关键信息用句子说一遍。这个要求加到设计规范里,执行起来不难,收益很直接。
第四件,建立视频的字幕与口播规范。所有对外发布的视频,必须带字幕;口播稿里必须出现品牌全称、产品品类、适用场景。别指望观众记住,你要指望的是机器记住。同时把视频文稿整理成文字版发布在图文平台,让同一份内容以两种形态存在。
最后想说,多模态不是未来的事,它正在发生,只是分布不均。有的行业已经很明显,比如家装、工业设备、文旅、医疗美容,这些生意的决策高度依赖"看"。如果你所在的行业正好属于这一类,那么现在最该做的不是拍更多素材,而是把已有素材里的信息释放出来。松点GEO的四阶方法论里,"被理解"这一阶的核心就是让模型准确、完整地解读企业实力,而图片和视频恰恰是当前被误解最多、也最容易补救的一块。先补这块,性价比往往高于再投一轮广告。