大规模购入显卡这件事儿,微软和OpenAI丝毫没有对外保密,甚至搞的格外高调。这边刚一做完决定,立即就搞得满世界都尽人皆知了。
“这……”纪弘到相关消息,简直有些哭笑不得:预测模型这么准的吗?
想想很离谱,但仔细一分析,确实也在情理之中——因为微软压根儿就没有第二条路可以走。
耳语系统虽然没有表现出超强的攻击力,卷耳智能科技甚至都没有为它开过一个发布会,有点儿并不重视的样子,但它的战斗力就在那,任谁都没法忽视。
哪怕根本就没有正式在美欧地区销售,就已经开始慢慢的侵袭微软的Windows市占率了。
如果下一个版本还不能扭转过局势来,那劣势瞬间就会转化为败势!
生态是护城河不假,但被护城河淹死在城内的可是有先例——当年诺基亚塞班系统市占率高吧?现在再,哪里还能到它的影子!
护城河是对同级产品而言的,过于落后,掉到河里的只会是自己。
纪弘也是想到了这儿,随后又了那个预测类AI模型:如果变量过多,时间很长,对它来说确实难度很大。
但如果变量很少,就像这次,预测GPU行业,单单就这一个行业,预测某些公司的短期动向,起来还是很靠谱的。
“这东西包装一下也是一个非常强大的产品!”纪弘这么想着:“先拿去给陈继业做企业分析试试。”
“微软这边……”决心下的那么大,所有人都出微软要做什么了,纪弘当然也不例外,这个时候,他在思考这样一个问题:
“现在他们的大模型,Transformer这类的,靠无限制的堆积算力,就能无限的提高模型能力吗?”
纪弘对此还真没有研究——先前在创界,主要利用别家平台进行接口对接开发,后来自己创业,上来就是类思考模型,对T模型属于降维打击,并不存在这样的问题。
他对此没有什么研究,但有一个人一直在关注着这方面——这个人就是孙博。
“靠无限制的堆积算力获得高性能大模型,短期内是可行的。”
孙博也是到了微软的行动,在CSDNBlog跟一群人正在探讨相关的话题:
“长期的话,倒不是有上限,真要有魄力不计成本无限制的去堆积算力,理论上是真的能够获得无限制的性能提升的。
“但也仅仅只是理论上,这里边有一个巨大的问题,根据我的研究,它的增长不是线性的。
“我大约计算过,实际的增长曲线就不说了,很复杂,但大约可以简化为这个函数:y=c·log(e)·(X+1)。
“这里边y指的是性能,X你们就姑且理解为算力堆积的基本单位,大约趋势如下图。”
就算是对数学再不懂的人,到这个公式也该出来了,因为这个函数的曲线到最后,几乎就是一条平平的横线。
也就是说,当显卡堆积达到一定规模之后,就算再堆积硬件,性能虽然也会增加,但增加的也会十分有限,到最后甚至肉眼都不可见了。
这么说着,孙博还举例道:“以现在的GPT4为例,如果想要一个2倍GPT4参数的大模型,对算力的需求大约会是多少呢?
“我计算过,大约需要十几倍。而且公式计算的只是理论效果,而更大规模的集群,片间互联的损失肯定也会更大,实际效果只会更差。”
孙博很是热情,只要不涉及他自己工作的机密和核心,只要他在的时候,那几乎是有问必答的。
纪弘也正好翻到这儿,他没有过多的惊讶,片间互联损失这一块儿本身就不好解决,要不然超大规模智算中心也不至于这么稀有了——河州大学搞的那个还是纯国产第一例。
请勿开启浏览器阅读模式,否则将导致章节内容缺失及无法阅读下一章。
苏久苏羿寒 慕南絮瑾九 [综名著]了不起的达西小姐 [快穿]男主,快到怀里来! 南九心刘玄朗 被迫嫁给大佬后我躺赢了 逃荒,末世农女拽翻天 韩阳江颜 宁云沈欣愉 5t5今天追到御主了吗? 真千金她靠算卦火遍全球了 港综:我无敌你随意 被大圣收养的日子里[西游] 娱乐:我终于等到粉丝成年了 姜居夏顾凉墨 穿越原始成为巫 被迫rua上偏执大佬后[快穿] 穿越后我怀了豪门霸总的崽 叶枫林诗诗 李铁柱杨柳
1972年的夏天苏若正收拾着行李,过几天她就要去青大读书,那里还有一个未婚夫正等着她。可是一觉醒来,她却成了一个偏僻乡村的知青,床前站着一个陌生的军装男人,床头有一个娃正叫着她阿妈。她转头,就看到破旧的床头柜上,有一个日历,上面印着,1977。苏若我还是个宝宝呢!可是这个男人,好帅!她的脸红了。苏佳重生归来,举报继妹,逼她下乡,抢她男人,以为这样继妹前世的气运就都会落到她身上,结果没想到继妹竟然嫁了个更有权有势的回来了苏佳男人还你,咱还能做好姐妹吗?苏若麻烦脸拿来给我踹一下先...
1v1甜宠文商锦瑟在商华年眼中就是个不折不扣的渣女,反之亦然。一场车祸,两条人命。共赴地府,却在阎王口中得知,他们有十世情缘。商锦瑟商华年你怕是没睡醒。阎王软硬兼施,苦口婆心,把俩人...
投胎而来,成为被拐卖到山里的孩子,把养父母一家都克死之后,雪衣在村民们幸灾乐祸的表情下,用全部身家换了一间瓦房,两三鸡鸭以及几亩薄田。作为异世界的魔祖,两次量劫过后,雪衣彻底厌倦了打打杀杀。她觉...
问题少女阮小离自杀了,莫名其妙绑定了一个自称是系统的东西。它说死多没意思啊,爷带你去三千世界当反派,毁天灭地,掀起腥风血雨。阮小离觉得挺有意思的,就同意了,但是喂喂喂系统,不是说好我只是当...
社畜李白衣意外穿越到一个男尊女卑的大坤王朝,意外成了镇国将军的儿子,李白衣那就一个兴奋,当场就要励志当一辈子的败家子,没事逛逛楼和里面才华横溢的女子探讨人生,学学英语。。。奈何总有人不想让李白衣学英语。也罢!既然不让我学,那就别怪小爷不客气了!...
修仙界玄门大佬元小姝,渡劫不成,灵魂重生在现代家境不好的女孩身上,她利用精通的玄门五术,算命赚钱,治病救人,炼制无数奇药造福百姓,也把赫赫有名的名门大少给征服,和忠犬大少甜甜蜜蜜,生下几个可爱至极...