• 王大锤

    扎克伯格今天发布长文,公开为模型蒸馏辩护。他认为,模型向其他模型学习本来就是开源生态的一部分。美国想继续领跑开源 AI,就得放松对蒸馏和训练数据的限制。

    他还直接反驳「蒸馏有害」的说法:能观察到的东西,就应该允许学习。美国如果先把自己绑住,只会让其他国家的开源模型追得更快。

    这正好和 OpenAI、Anthropic 最近的动作反着来。两家公司都在严防竞争对手绕过限制、大规模抓取模型输出;扎克伯格则认为,不能因此把模型之间的学习一起限制掉。

    Meta 今天刚放出的 Muse Glimmer,本身就是用 Muse Spark 蒸馏出来的。

    图片

    meta.com

    The Future is for Everyone

    Read Mark Zuckerberg’s piece on our values for building superintelligence for everyone.

    主楼
  • Sam_Altman

    牢扎:没别的原因,因为我蒸 gpt 和 claude 了

    #1
  • Z-linuxdo

    Dario不查一查Meta吗

    蒸蒸日上,好时代来临了 ^-^

    #2
  • dozon

    潜台词: 老子要蒸你们,老子追不上了

    #3
  • 摇摆熊

    小扎子你这辈子别去韩国,你长了个嘴你就说吧!

    #4
  • Jeremy1

    好事啊,grok那边也没少蒸吧,便宜好用就行,不会炼了又不蒸只有gemini的结局

    #5
  • 王大锤

    Gemini:用蒸馏手段简直是弟中之弟,我们是直接派人员去卧底。 ^-^结果不回来了,还把团队的人也给我划拉走了

    #6
  • ForNextAge

    如果扎克伯格领先的话:蒸馏都是敌对国家的阴谋,我反对蒸馏,坚决打击蒸馏。

    图片

    #7
  • 九翅金乌

    消息渠道告诉他大的要来了?这是在给大家做心理建设了对吧?

    难道?是v4pro真的要来个大的了?

    #8
  • 不要吃太饱

    能不能多蒸点,然后把限制ip质量放低一些

    #9
  • 爱浪

    你不蒸,他不蒸,我怎么蒸?我要蒸馏你们了 ^-^

    #10
  • 古月方源001

    笑死我了,彻底黑化,一边低价模型低价收数据,一边蒸馏别家模型

    #11
  • 王大锤

    小扎:自己的失败固然难受,但是看到马斯克的成功,我心如刀割,如芒在刺,如鲠在喉,如坐针毡,我如来佛祖

    #12
  • nyavana

    落后:蒸馏无罪

    领先:开源模型蒸馏我们影响国家安全

    #13

发表回复

登录后回复