跳到正文
抖音 · 热点搜「Fable 5.2」· 程序员阿江-Relakkes·· 1 天前精选AI 评分74

Claude Fable 5.2 实测:ModelDial 私有题库跑出 94 分,3D 风电巡检系统耗时 2 小时

Claude Fable 5.2 太强了,把我们的题库刷爆了 Claude Fable 5.2 实测来了!我们用 ModelDial 私有题库跑出 94 分,还让它做了一个 3D 风电巡检系统。效果确实强,但消耗也是真顶不住。 你会选择最强模型,还是更在意性价比? #AI新星计划 #claudefable52 #fable52 #大模型实测 #modeldial

AI 导读

Claude Fable 5.2 在 ModelDial 私有题库实测拿到 94 分,超过此前第一的 Claude Opus 5.5 的 89.75 分。作者还让它生成 3D 风力发电巡检系统,耗时约 2 小时、消耗 80 美元订阅额度,跑题库则花 6 小时、81 美元,速度是 Opus 5.5 的 6 倍。作者认为能力断档领先但太贵太慢,日常开发仍推荐 Opus 5.5。

打开原文douyin.com
选题角度

作者用私有题库实测 Claude Fable 5.2 拿到 94 分并跑出 3D 风电巡检系统,可围绕高分与高消耗的反差做实测对比。

博主

粉丝 3.2万

MediaCrawler、cc-haha作者 开源累计获得90k Star 分享AI Agent知识 提示词和工具🔗:ajiang.me

互动数据
点赞
343
评论
51
分享
148
收藏
93

数字来自平台,为最近一次抓取时的数据。

正文

以下是视频口播的自动转写,可能有错字。

在这期视频开始之前,我先给大家看一个 case 真的是看完这个 case 你会觉得 cloud 5.2这个模型真的就是震惊摊座了,兄弟们,你来看一下吧。大家觉得这个游戏怎么样?是不是完成的相当的 ok?这是 cloud 5.2,在没有任何人工反馈的情况下,品一次提示词就能达到这样的效果。

总共耗了8个小时,然后550美刀。那作者这边也给了你一个链接,你可以在这边自己去,在这边在线玩。因为我本身不熟悉 cf 嘛,然后我也有点晕这种3d的游戏,就简单玩了一下,是 ok 的,就是能达到他视频里面的效果。非常非常的完美,好吧?兄弟们,今天 anthropic 发布了他们的 cloud fiber 5.2的模型,直接把我们自己做的这一个大模型评测公益站。

model dial 的题库给刷爆了。那 model dial 这个评测站全是我们精心准备的各个维度的私有题库。之前排名第一的 cloud opus 5.5是拿了89.75分。那国产模型这边最高的话是 kimi k3.1 pro 是80.1分。

排在我们榜单的第11名。好,我们来直接看一下 cloud fiber 5.2多少分吧?94分,太猛了,直接断档领先 ops 5.5,gemini 4,carbon,gpt 6,extra。真的太顶太顶了,直接眩晕瘫坐好吧。但是呢,它的这个消耗哈,我感觉真的太贵了。

我们这个公益站都快搞不下去了。那这一期视频光跑 model 3的这个题哈,花了我们81刀。90%都是在 open luter 上直接调 api 去测的。那剩下的10%的话,是因为 open router 跑这一个 favor 5.2 max 的这个强度嘛,会遇到超时的情况,所以少部分题是在我本地的这个 cc20x 的订阅下去测试的。

所以这一波求大家一个一键三连不过分吧?好,我们来看一下它的这个时间消耗。跑我们的题库的话,是花了6个小时。在 max 这个思考强度下,消耗时间是 ops 5.5的6倍,是 gpt6 answer 的4倍时间。它的智能的话,就是真的现在已经遥遥领先了,好吧。

下面看一下我们频道的一个保留测试题吧,3d 风力发电巡检系统。那这个题的话,直接跑了2个小时,也特别夸张。我们来看一下它的这个表现情况到底怎么样?这是它的这个加载页面。非常的顺畅,我们点一个有问题的风机定位过去。这是一个3d 风力发电巡检系统,大家可以看一下这个效果,特别顶,现在已经是我这里面最好的一个 case 了,大家可以看一下它的这一个细节。

如果之前熟悉我的观众朋友,看之前就是一些其他模型,你会发现它的风机渲染没有它这么真实。而且大家可以看一下它这个倒影,可以看到没有,在水下的这个倒影。已经相当相当厉害了,我的天哪!就是直接眩晕瘫坐。我们来看下它的告警,我们随便点一个告警过来,可以看到也是非常丝滑的。

我们从这个视角可以看到,它这些灯有故障灯在亮的时候,可以看到这个水面上它的这个反光也是做的细节做的很到位的。所以说这一个题库的话,它花了2个多小时,完成度确实是非常非常的高。已经找不出来它的毛病了。ok,这个案例的话是跑2个小时嘛,它的 fiber 5.2的消耗的话是花了我80刀的一个订阅额度。

但是因为是 fiber 5.2,所以我的这个 ultra 档位的这个订阅周线也掉的特别快。我是昨天重置的,昨天跑了一天的 opus 5.5,那今天跑了一上午的 opus 5.5加 fiber 5.2,给大家看一下我还剩多少订阅,还剩37%。

也就是说我现在还有5天才重置,后面真的得省得点花了。明显能感觉到 fable 5.2的这个消耗啊,是蹭蹭蹭的在往上涨。虽然这个模型的能力真的现在是断档式的领先哈,但是大部分人以及大部分的任务,我觉得应该是用不上它的,真的太贵太贵了,而且速度也慢。

虽然这次他给发了一些重置卡,但是我们也只能重置 fable 的一个额度,你的周线额度也不会重置。所以说我感觉 anthropic 能不能学学 table 啊?另外也给大家聊一聊我最近使用这一个 cc 模型的一些体感吧。根据我最近一段时间哈,我是在高强度的用 opus 5.5这个模型,在我的所有开发任务里面,几乎没有它搞不定的。

而且完成度我也非常的满意,包括但不限于,就是维护我的很多开源项目啊,大家都知道,我现在所有的开源项目累积下来应该有90k star 了。还有的话,维护我们这个 modeldev 的挑战赛的一些 agent 的环境和系统建设。还有平时大家看到我做视频的这些动画,全是它做的,就质量非常的好,而且它的返工率比较低。

那 gpt-6 answer 这个模型的话,我现在用的频率其实不是特别高了。主要是因为它速度太慢了,而且写代码时候经常出现那种防御性编程,还有它整体的这个前端 ui 写给人的感觉就非常的不舒服,就不太好。所以我感觉它的干活体感是完全不如这个 ops 5.5的。

对了。本来我还有三道特别难的这个 erp 13代码的。那用派 a 型的去构建的。之前也测试过三个国产模型,那三个国产模型当时表现一般。那这次飞博5.2发了嘛,我就刚开始也没多想,直接挂了我的那个 cloud 官方的 api 去跑的。跑了20分钟,我一看消耗,直接终止了,跑不起,消耗太快了,直接20多刀没有了。

这三道题之前我们测国产模型的时候,要跑2个多小时。按照 vivo 5.2这种 max 的这个推理速度来算的话哈,真的会用不起。他保守估计得跑我150多刀,有可能会到200多刀。所以说以后等手手头宽裕了再测吧,真的测不起了。最后如果大家能订阅上 cloud 的模型哈,我还是建议用 opus 5.5,它的智商真的在线,写的代码也在线。

然后审美也挺高的,最关键的,同一个价位的订阅哈,他给的这个 token 额度其实算很多了。可以看一下我们 model 带有这里的这个额度实测板块哈。我们可以看到,200刀的预算的话,ops 5.5的话,你可以用286亿的这个 token。如果你用 solana 5.5省一点的话,你可以用400多亿。

基本上就是量大管饱,好吧?但是缺点大家也知道,就是特别容易封号。那我这边也分享一下我的订阅方式,我现在是用谷歌 play 订阅的,花了250刀,也就是交的税嘛,相当于交了20%的税。然后是用国内的 visa 卡订阅的,然后 qic 的话是用,就是我自己的护照。

目前也没有什么关注什么网络的问题,也没有封,目前用了快两个月了吧。那我之前一个账号是用,就是 apple store 嘛,就苹果订阅的。那个号存在了挺久的,好像三四个月,三四个月吧,应该是。为什么被封号?我当时是,就是手有点贱,用到了那种反反代里面。

用到反代里面去测一些 api 嘛,后面就被封掉了。那我现在这样用下来的话,基本上也还没封。但是的话,说不定什么时候就封了,是不是?那如果真封了,也没有关系,你可以去找,对吧,找谷歌 play 去退款,找 app store 去退款。他们俩如果实在不退,你还可以找那个信用卡那边去吧,去仲裁之类的。

所以说,就是你当,相当于说花一定的这个税吧,对吧,花20%的税去求一个稳定。当然,如果你用一些 gpt 的模型用的也很好,比如说你没有像我这样的一些开发任务,或者是在你的一些后端任务啊,各种任务,你觉得 gpt 那边能完成任务,完全 ok,gpt.

最开始也不怎么封号,是不是最近可能也开始封号了?那这就是本期视频所有的内容了。我是阿佳,我们下期视频再见,拜拜!

来源:抖音 · 热点搜「Fable 5.2」 · douyin.com