ZH

fenshot / 准确率

fenshot 有多准?

我们在已知正确答案的国际象棋图片上进行测量:由 chess.com 和 Lichess 自己绘制的棋盘,按印刷书籍的方式排版的书中棋局图,以及发布在 Reddit 上的真实截图。下面是结果、方法,以及 fenshot 出错的每一种情况。测试、数据和结果都是开源的,任何人都可以重新运行。

98.3%
118 / 120
默认外观的 chess.com 和 Lichess 页面完全读对
85.8%
419 / 488
真实 Reddit 截图读对(至少)
95.2%
81 / 85
绘制的棋盘和书中棋局图上,识别错误时附带了提醒检查的警告
100%
40 / 40
没有棋盘的页面中,fenshot 没有凭空编出棋盘
最近一次运行
2026-11-10
模型
chess-tiles-v2
图片数
1068

按来源划分的结果

“正确”指 64 个格子全部一致。“有警告”指 fenshot 已提醒用户识别结果可能有误,并打开编辑器供修正。红色那一列,即识别错误且没有警告,是最关键的一列。

来源图片数正确正确,但有警告错误,有警告错误,无警告未找到棋盘
chess.com 分析页面,桌面端和手机端60580200
Lichess 分析页面,桌面端和手机端60600000
更换了棋子样式和棋盘的 Lichess 页面604161210
chess.com 棋盘图片,14 种棋子样式和 12 种棋盘240188143530
用 LaTeX 排版的书中棋局图,斜线阴影格12055333200
Reddit 截图,来自 r/chess、r/chessbeginners、r/TournamentChess4883902945195
训练中见过的棋子造型36333020940
从未见过的棋子造型17772337200

自首次运行以来的变化

2026 年 11 月 10 日。首次运行表明,fenshot 在印刷风格的棋局图中找不到棋盘:深色格内的斜线阴影让它看不出棋盘的网格。在大理石纹棋盘上,识别结果还可能错位一格。现在,只要第一遍看的结果不是明显正确,fenshot 就会对图片的柔化副本再看一遍。棋子识别器本身没有变化。

读对首次运行现在
书中棋局图1 / 12088 / 120
更换了棋子样式和棋盘的 chess.com 和 Lichess211 / 300249 / 300
默认外观的 chess.com 和 Lichess 页面118 / 120118 / 120
Reddit 截图405 / 488419 / 488

fenshot 的薄弱之处

识别结果不确定时,fenshot 会显示警告,并在原图旁打开编辑器,改正一个错格只需几秒。最常见的情况,即默认外观的 chess.com 或 Lichess 截图,几乎每次都能读对。

我们如何测量

自己重新运行

基准测试位于开源仓库的 tools/benchmark 目录下:局面列表、每张图片的来源和指纹、附带两种识别结果的 Reddit 帖子,以及上面逐张图片的结果。用 npx tsx tools/benchmark/build.ts 重新生成图片,用 npx tsx tools/benchmark/run.ts 进行评分。