FAQ
常见问题
关于这个指数如何运作的简短回答。完整方法见方法页。 方法
AI Vision Index 是什么?
这是一个独立的排行榜,看 AI 模型看图到底准不准。我们测的包括读时钟、仪表、图表和标签,数数,判断空间与运动,找变化和错误,顺着电缆和管道走,以及不被误导。目前排了 36 个模型,结果更新于 2026年11月10日。
它和公开的基准测试有什么不同?
公开基准会公布题目。时间一长,这些题就进了模型的训练数据,高分可能只说明模型见过答案。我们的测试图片是自己做的,从不公开。每道题只有一个确切答案,由脚本核对,用不着人或 AI 来打分,每个结果也都注明是哪天测的。
为什么测试要保密?
为了不让任何模型提前学到。图片一旦公开,很快就会在网上被转来转去,最后进入训练数据。所以我们只介绍每项测试,给出示意的例子,真正的图片和题目留在自己手里。
得分是怎么算的?
每项测试的得分是答对的比例,扣掉了蒙对的部分。0 分就是和瞎猜一样,100 分是全对。类别得分是其下各项测试的平均,总分是六个类别得分的平均,所以没有哪个类别占更大权重。详见方法页。
为什么有些模型并列排名?
每个得分都有误差范围(95% 置信区间)。两个模型得分接近到分不出高下时,就并列排名,显示为“3–7”这样的形式。样本较小的模型置信区间更宽,所以可能与更多相邻模型并列。
为什么有些模型每次回答更贵?
厂商按 token(模型读写的文字和图片片段)收费,价格差别很大。会先“思考”再回答的模型还会写出大量隐藏的 token。我们按各厂商的标准标价报告 1000 次回答的成本(含思考),这样模型之间可以公平比较。在你自己电脑上运行的模型,每次回答不花钱。
速度是怎么测的?
每次回答耗时是我们按正常优先级直接调用模型时,一次回答的典型(中位数)用时;本地运行的模型则是在笔记本显卡上的用时。其中包括作答前的思考时间。暂时无法用可比方式计时的模型显示为“–”。
你们测哪些模型?可以推荐吗?
我们测各大厂商的主力模型、更便宜更小的模型,还有能在个人电脑上跑的开放模型。新模型一出来就会陆续加进来。想推荐模型,可以通过测试你的图片表单告诉我们。
可以测试我自己的图片吗?
可以。发给我们几张你关心的图片,说说你想从中知道什么。我们私下用这些模型测一遍,再告诉你它们表现如何。测试你的图片。
结果多久更新一次?
每次测了新模型或新版本就更新。模型名字不变,内容却可能变了,所以每个结果都注明测试日期。
谁在运营,谁出钱?
我们独立运营,自己出钱。没人能花钱上榜,也没有厂商能在测试前看到题目。
可以转载或嵌入这些结果吗?
可以。汇总结果(得分、置信区间、成本和日期)采用 CC BY 4.0 许可:注明来自 AI Vision Index 并附链接即可。可以下载全部结果(JSON),嵌入实时前 10 名(代码见下方),或者把模型徽章放到你的网站上(每个模型页面都有)。
应该怎么引用?
AI Vision Index (2026). AI Vision Index: independent tests of AI vision models. https://aivisionindex.com/zh/(2026年11月10日 的结果)。
术语表
- 扣除猜测因素
- 得分只算模型在蒙对之外答对的部分:(正确率 − 蒙对概率)÷(1 − 蒙对概率)。是非题的蒙对概率是一半,时间或数字这类自由作答题是零。
- 误差范围(95% 置信区间)
- 如果换一批同类图片再测一次,得分大概率会落在这个范围里。范围越窄,我们越有把握。
- 类别
- 针对某一种“看”的能力的一组测试:阅读、计数、空间、3D 与运动、找变化与找错误、示意图、不被误导。
- 总分
- 六个类别得分的平均值,满分 100。
- 开放权重
- 厂商公开发布模型本身,任何人都可以下载并在自己的电脑上运行。
- 思考强度
- 在厂商提供设置的情况下,模型作答前可以推理多久。我们会注明所用的设置。
- 本地运行
- 模型在我们自己的电脑上运行,不经过厂商的服务器,所以每次回答都不花钱。
- 每1000次回答的成本
- 按厂商标准标价计算的 1000 次回答的美元成本,包含思考。
- 每次回答耗时
- 我们运行时一次回答的典型用时,只在运行方式代表正常使用时显示。
- 难度等级
- 每项测试都一级比一级难,这样就能看出模型从哪一级开始出错。
嵌入与转载
把实时前 10 名放到你的网页上:
<iframe src="https://aivisionindex.com/zh/embed/" title="AI Vision Index top 10" width="100%" height="520" style="border:0" loading="lazy"></iframe>
每个模型页面都有显示排名和得分的徽章,并附可复制的代码。 全部结果(JSON) · 汇总结果(得分、置信区间、成本、日期)采用 CC BY 4.0 许可,注明来自 AI Vision Index 并附上链接,就可以自由使用。