• kk-linuxdo

    图片

    图片

    这真的还是我们的美国大豆包吗 ^-^

    主楼
  • deepcake

    这怎么比谷歌官方自己测的还要高?

    #1
  • 蛋炒饭

    这么强,谷歌怎么没有高调宣传一下,难道他们想扮猪吃老虎^-^

    #2
  • Hifumi_Mizuhara

    图片

    谷歌官方的图在这里,这里看是没有到Opus 5的

    #3
  • ikb

    输出143k + 166步 还是有点高了,靠长输出长思考拿到的分数比较虚。token效率方面GPT还是绝对的王者。

    #4
  • 114

    这套题都快过拟合了吧,最近的模型都69%左右,该升级了吧,不然毫无参考价值,沦为野榜 ^-^

    #5
  • ikb

    这个图里gemini的分可能是medium的

    #6
  • 天则则

    有咕噜咕噜的榜默认野榜就行了。

    当年从 2.5Pro 开始刷分就没停过。

    #7
  • Hifumi_Mizuhara

    坏了,现在DeepSWE也是野榜了吗

    #8
  • koubibulaien

    虽然token是两倍多,但是TPS比两倍还多呀,sol的TPS日常是三四十,flash的tps日常200起步

    #9
  • 天则则

    都让谷歌刷明白了,这套题也快退役了

    #10
  • Hifumi_Mizuhara

    价格也便宜两倍还多,总结上几乎无感

    #11
  • Hifumi_Mizuhara

    图片

    看起来Terminal Bench 4.0还没被刷明白,其他都刷的明白了

    #12
  • Elon1

    这真的还是我们的美国大豆包吗 ^-^

    计划有变,准备夺冠!

    老将的力量这么强吗

    #13
  • Hifumi_Mizuhara

    看来大换血真的有点用,之前的GDM的人都在摸鱼吗

    #14
  • kk-linuxdo

    埃隆,你家的 4.7 不是也要夺冠了吗 ^-^

    #15
  • ikb

    虽然token是两倍多,但是TPS比两倍还多呀,sol的TPS日常是三四十,flash的tps日常200起步

    不能这么比,同样的任务输出token多了步骤多了会给心智注意力带来很大压力的,长程任务很容易不稳。GPT 400K context能干你GEMINI 1M context能干的事还能干得更好,GEMINI跑到1M context脑袋都一团浆糊了。

    #16
  • 吴亦Fan?

    哈吉米长任务就是废,深度体验过气死人!

    #17
  • Hifumi_Mizuhara

    GPT官方都建议限制在256k context哎

    #18
  • ikb

    codex里默认的context大小整体是272K+128K=400K

    #19

发表回复

登录后回复