做了一个 ai 模型降智监测页面

7 月 11 日
 utcplus

最近做了一个大模型降智监测页面:

https://www.okkmax.com/tools/iq

可以看 Claude 、GPT 、Gemini 、DeepSeek 、Kimi 等模型最近的能力变化,包括当前智商、历史趋势,以及推理、编程、工具调用和稳定性等分项表现。

平时经常看到有人说 Claude 或 Codex 最近降智了,但单靠个人体感不太容易判断。

这个页面主要就是把模型近期的数据变化整理出来,方便对比它现在的表现和之前是否有明显差距。

功能刚上线,欢迎大家体验和提建议。

1577 次点击
所在节点    OpenAI
2 条回复
doraemonki
7 月 12 日
感觉很不错,许几个愿望😂。

- 降智经常伴随的行为有推理深度(思考 token 数)显著降低,token 输出速度显著提高,这俩的变化能展示出来就好了。
- 希望区分模型是 API 渠道还是订阅渠道。另外根据 codex 最近一个降智讨论 issue 来看,表现很可能还会受到模型调度工具影响(codex 版本)。链接: https://github.com/openai/codex/issues/30364
utcplus
7 月 12 日
@doraemonki 明白,我研究一下

这是一个专为移动设备优化的页面(即为了让你能够在 Google 搜索结果里秒开这个页面),如果你希望参与 V2EX 社区的讨论,你可以继续到 V2EX 上打开本讨论主题的完整版本。

https://v2ex.ih06.com/t/1226624

V2EX 是创意工作者们的社区,是一个分享自己正在做的有趣事物、交流想法,可以遇见新朋友甚至新机会的地方。

V2EX is a community of developers, designers and creative people.

© 2021 V2EX