手机浏览器扫描二维码访问
提到AI芯片,不少人可能觉得“离自己很远”,但其实咱们平时用的AI聊天、刷的短视频推荐,背后都靠AI芯片“算”出来的。现在AI芯片正在快速升级,其中有两个方向特别关键:FP8精度和多芯互联。这俩词听着挺专业,其实用大白话拆解开特别好懂——简单说,FP8精度是让芯片“算得又快又省电”,多芯互联是让芯片“组队干活,力大无穷”。今天就从这两个方向入手,跟大家聊明白AI芯片是怎么升级的,以及对咱们用AI、对国产芯片发展有啥影响。
一、先搞懂基础:AI芯片为啥要“升级”?核心是解决“算力不够、电费太贵”的问题
在聊具体技术之前,得先弄明白一个事儿:AI芯片为啥非得升级?答案很简单——现在的AI越来越“能吃算力”了。
比如训练一个像GPT-4这样的大模型,需要处理几十万亿条数据,要是芯片算得慢,可能得花好几个月才能训练完;而且芯片算的时候特别费电,一个大模型训练一次,电费可能就好几百万。以前的芯片技术,要么算得慢、要么电费高,根本跟不上现在AI的“胃口”。
就像咱们做饭,以前用小煤炉,做一大锅饭又慢又费煤;现在换成大燃气灶,又快又省气。AI芯片的升级,就相当于从“小煤炉”换成“大燃气灶”,核心是解决“算力不够用、能耗太高”这两个痛点。而FP8精度和多芯互联,就是解决这两个痛点的“两把钥匙”。
二、第一个升级方向:FP8精度——让芯片“算得准、跑得快、省电费”,大模型训练直接受益
先来说第一个关键技术:FP8精度。这里的“精度”不是指芯片的制造精度,而是指芯片“计算数据时的精细程度”。咱们可以把芯片计算想象成“用尺子量东西”:以前的芯片用“厘米尺”量,现在FP8精度相当于用“毫米尺”量,既能量得更准,还能更快量完,同时还不费“力气”(也就是省电)。
1. 先拆“FP8精度”:不是“精度降低”,而是“精准控耗”,该细的地方细,该省的地方省
可能有人看到“FP8”里的“8”会疑惑:以前不是有FP16、FP32吗?数字变小了,是不是精度变低了?其实不是这么回事。
简单说,“FP+数字”代表芯片存储和计算数据的“格式”,数字越大,能存储的数据越精细,但需要的存储空间和计算资源也越多。比如FP32就像“高清电影”,画面特别细,但占内存大、播放时费电;FP16像“标清电影”,画面稍粗一点,但占内存小、播放快;而FP8是“优化后的标清”——在保证画面(计算精度)够用的前提下,把没用的“像素”(冗余数据)去掉,既不影响观看(计算结果),还能省内存、省电费。
举个例子:比如计算“1. + 2.”,用FP32能算出“3.”,精确到小数点后8位;用FP8算,能算出“3.5802”,精确到小数点后4位。对咱们日常用的AI来说,小数点后4位的精度完全够用——比如AI推荐短视频,不用精确到小数点后8位,只要能判断“你喜欢这个视频的概率是85%”就行,没必要算成“85.%”。
所以FP8精度不是“降低精度”,而是“精准控耗”——把算力和电量用在“刀刃上”,该精细的地方不马虎,没必要精细的地方省资源。
2. FP8精度的核心好处:算力密度翻2倍、能耗降30%,大模型训练直接“提速又省钱”
搞懂了FP8精度的原理,再来看它的实际好处,主要有两个:一是“算力密度提升2倍”,二是“能耗降低30%”。这俩好处对大模型训练来说,简直是“及时雨”。
先解释“算力密度”:就是同样大小的芯片,能提供的计算能力翻了2倍。以前一块芯片每秒能算100次,现在用FP8精度,每秒能算200次。这意味着训练大模型时,需要的芯片数量能减半——比如以前要100块芯片,现在50块就够了,不仅省了芯片采购钱,还省了机房空间(放芯片的地方也需要成本)。
再看“能耗降低30%”:就是算同样多的数据,电费能省三成。举个直观的例子:以前训练一个大模型,用老芯片需要100万度电,电费按工业用电1元/度算,得花100万;现在用支持FP8精度的芯片,只要70万度电,电费直接省30万。对那些经常训练大模型的企业来说,这可不是小数目——比如某AI公司一年训练10个大模型,光电费就能省300万。
而且这两个好处加起来,还能“缩短训练周期”。比如训练GPT-4这样的大模型,以前用老技术需要3个月,现在用FP8精度,算力翻2倍、能耗降30%,算下来训练周期能缩短25%,也就是只要2个多月就能训练完。对企业来说,训练周期缩短意味着能更快推出新的AI产品,比如别人还在训练,你已经把新的AI聊天工具上线了,自然能抢占市场先机。
诡者,妖魔鬼怪也;异者,神秘诡谲也。这里有食人影子的食影,有以梦杀人的梦魇,有以吓唬小孩为乐的猫儿爷,有乘之可穿梭阴阳的阴马车,有只杀人不救人的杀生佛,有只可死人听不可活人看的诡京剧,有行走于街头巷尾卖人肉馄饨的混沌婆婆,有以寿命为买卖的三生当铺……一本神秘的《诡录》,将苏逸带进了这个光怪陆离、神秘莫测的世界。...
附:【本作品来自互联网,本人不做任何负责】内容版权归作者所有!夏未央(连城VIP手打完结)作者:日月青冥内容简介我知道,你我之间这一切不过是一场交易;可我以为,如果有一天你要做出选择,至少,你一定会选择我。直到你笑着挽起她的手头也不回,我才终于明白,原来从头到尾,不过是我自欺欺人的一厢情愿。可这份对你的爱依旧梗在胸口隐隐作痛...
隆安帝二十七年,少年将军周鹤鸣大挫朔北十二部,得胜回朝,被迫成亲。 对方恰好是他心上人……的亲哥哥。 * 周鹤鸣幼时曾到宁州,机缘巧合,惊鸿一遇,单恋抚南侯郁涟许多年,自然知道对方有个怎样糟糕的兄长。 郁濯此人,在宁州坏名远扬,人人嫌恶。 二人大婚当日,郁濯春风得意,周鹤鸣万念俱灰,唯恐避之不及,郁濯却偏要来招惹他。 周鹤鸣如临大敌,誓要为心上人守身如玉,好歹将对方制服,却听见郁濯饶有兴趣地问: “我究竟哪里不如舍弟?” “你说出来,我定分毫不改。” * 恰逢战事又起,周鹤鸣马不停蹄赶回青州,却先等来了自己的白月光郁涟。 郁涟为公事而来,周鹤鸣知此生无缘,但求尽心护其左右。 护着护着,他发现了不对劲。 自己的白月光,怎么私下里行事作风同他的可恶兄长一模一样? 周鹤鸣如遭雷劈,艰难说服自己接受了白月光性情大变的可能性,对方却出其不意地掉了马。 “怎么了小将军?猜到我即是他、他即是我之后,你就不爱笑了。” 【鬼话连篇·钓系混邪美人受x前期纯情忠犬·后期狼狗攻】 周攻郁受,不拆不逆 可怜的周鹤鸣,被郁濯玩弄于股掌之中。 小剧场: 后来青州城外,绯色蔓延,白鼎山四野自阖为笼,并不许他人窥见半分。周鹤鸣一手环人,一手勒马绳,穿行于猎猎夜风。 郁濯仰头看他,开口时吐息潮热:“怎么好话赖话软话硬话都听不得?云野,是只想听我的真心话么?” 笑意层层染上了他的眼,眼下明晃晃露着颗小痣,像是天真未凿、漫不经心。 ——却分明是蓄谋已久的引诱。 周鹤鸣勒住缰绳,郁濯在突然的变速里微微后仰,露点半节修长脖颈,被一口咬住了喉结,周鹤鸣的声音嘶哑着响在耳边。 “你分明知道,我都会信的。” 【食用指南】 1.架空不考究,私设同性可婚 2.1v1,HE,正文主受,有群像,先婚后爱,24K纯甜文(信我 3.年下,攻为成长型人设 4.文名取自贺铸的词,封面是郁濯 5.不控攻/受,一切为故事本身服务...
——无系统,猥琐流——詹姆斯抱怨道:“我从来没有在超级球队待过。”而陈极会说:“对的,我很幸运,我去的每一支球队都是超级球队,不夺冠就失败的那种。”顺便问詹姆斯哈登一句:“登哥要总冠军戒指吗?”......
(本文有CP,男女主都不是完美人设,成长型,一定程度上自私,男主是莽夫!且配角不会莫名其妙降智,非无脑爽文。)‘道虽险阻,吾心甚坚’江上弦一朝穿越,勤勤恳恳在长安摆摊卖卤羊肉半年攒钱,准备给大唐餐饮业来一波震撼。凭空出现的神秘来信打乱了所有计划。“什么?这玩意儿还有任务?”“直爹贼!老娘就知道!你大爷的穿越还带业绩......
他是权势滔天的帝国总裁,强势霸道,狂妄不可一世。性情高冷禁欲的他,一时兴起将她禁锢在身边,渐渐地护她成了习惯,宠她成了执念,深入骨血的痴恋让她逃无可逃。他说:“我允许你任性,但你必须在我允许的范围内任性。当初你把自己当生日礼物送给我了,这辈子你就是我的!从头到脚都是我的!一根头发丝也是我!”......