AI Vision Index

FAQ

常见问题

关于这个指数如何运作的简短回答。完整方法见方法页。 方法

AI Vision Index 是什么?

这是一个独立的排行榜,看 AI 模型看图到底准不准。我们测的包括读时钟、仪表、图表和标签,数数,判断空间与运动,找变化和错误,顺着电缆和管道走,以及不被误导。目前排了 36 个模型,结果更新于 2026年11月10日。

它和公开的基准测试有什么不同?

公开基准会公布题目。时间一长,这些题就进了模型的训练数据,高分可能只说明模型见过答案。我们的测试图片是自己做的,从不公开。每道题只有一个确切答案,由脚本核对,用不着人或 AI 来打分,每个结果也都注明是哪天测的。

为什么测试要保密?

为了不让任何模型提前学到。图片一旦公开,很快就会在网上被转来转去,最后进入训练数据。所以我们只介绍每项测试,给出示意的例子,真正的图片和题目留在自己手里。

得分是怎么算的?

每项测试的得分是答对的比例,扣掉了蒙对的部分。0 分就是和瞎猜一样,100 分是全对。类别得分是其下各项测试的平均,总分是六个类别得分的平均,所以没有哪个类别占更大权重。详见方法页。

为什么有些模型并列排名?

每个得分都有误差范围(95% 置信区间)。两个模型得分接近到分不出高下时,就并列排名,显示为“3–7”这样的形式。样本较小的模型置信区间更宽,所以可能与更多相邻模型并列。

为什么有些模型每次回答更贵?

厂商按 token(模型读写的文字和图片片段)收费,价格差别很大。会先“思考”再回答的模型还会写出大量隐藏的 token。我们按各厂商的标准标价报告 1000 次回答的成本(含思考),这样模型之间可以公平比较。在你自己电脑上运行的模型,每次回答不花钱。

速度是怎么测的?

每次回答耗时是我们按正常优先级直接调用模型时,一次回答的典型(中位数)用时;本地运行的模型则是在笔记本显卡上的用时。其中包括作答前的思考时间。暂时无法用可比方式计时的模型显示为“–”。

你们测哪些模型?可以推荐吗?

我们测各大厂商的主力模型、更便宜更小的模型,还有能在个人电脑上跑的开放模型。新模型一出来就会陆续加进来。想推荐模型,可以通过测试你的图片表单告诉我们。

可以测试我自己的图片吗?

可以。发给我们几张你关心的图片,说说你想从中知道什么。我们私下用这些模型测一遍,再告诉你它们表现如何。测试你的图片。

结果多久更新一次?

每次测了新模型或新版本就更新。模型名字不变,内容却可能变了,所以每个结果都注明测试日期。

谁在运营,谁出钱?

我们独立运营,自己出钱。没人能花钱上榜,也没有厂商能在测试前看到题目。

可以转载或嵌入这些结果吗?

可以。汇总结果(得分、置信区间、成本和日期)采用 CC BY 4.0 许可:注明来自 AI Vision Index 并附链接即可。可以下载全部结果(JSON),嵌入实时前 10 名(代码见下方),或者把模型徽章放到你的网站上(每个模型页面都有)。

应该怎么引用?

AI Vision Index (2026). AI Vision Index: independent tests of AI vision models. https://aivisionindex.com/zh/(2026年11月10日 的结果)。

术语表

扣除猜测因素
得分只算模型在蒙对之外答对的部分:(正确率 − 蒙对概率)÷(1 − 蒙对概率)。是非题的蒙对概率是一半,时间或数字这类自由作答题是零。
误差范围(95% 置信区间)
如果换一批同类图片再测一次,得分大概率会落在这个范围里。范围越窄,我们越有把握。
类别
针对某一种“看”的能力的一组测试:阅读、计数、空间、3D 与运动、找变化与找错误、示意图、不被误导。
总分
六个类别得分的平均值,满分 100。
开放权重
厂商公开发布模型本身,任何人都可以下载并在自己的电脑上运行。
思考强度
在厂商提供设置的情况下,模型作答前可以推理多久。我们会注明所用的设置。
本地运行
模型在我们自己的电脑上运行,不经过厂商的服务器,所以每次回答都不花钱。
每1000次回答的成本
按厂商标准标价计算的 1000 次回答的美元成本,包含思考。
每次回答耗时
我们运行时一次回答的典型用时,只在运行方式代表正常使用时显示。
难度等级
每项测试都一级比一级难,这样就能看出模型从哪一级开始出错。

嵌入与转载

把实时前 10 名放到你的网页上:

<iframe src="https://aivisionindex.com/zh/embed/" title="AI Vision Index top 10" width="100%" height="520" style="border:0" loading="lazy"></iframe>

每个模型页面都有显示排名和得分的徽章,并附可复制的代码。 全部结果(JSON) · 汇总结果(得分、置信区间、成本、日期)采用 CC BY 4.0 许可,注明来自 AI Vision Index 并附上链接,就可以自由使用。

用邮件接收新结果

我们加入新模型或发表新文章时,会发一封简短的邮件,仅此而已。