英伟达GPU弱爆了!世界第一AI芯片升级4万亿晶体管、90万核心
【蜂耘网 IT业界】3月14日消息,Cerebras Systems发布了他们的第三代晶圆级AI加速芯片“WSE-3”(Wafer Scale Engine 3),规格参数更加疯狂,而且在功耗、价格不变的前提下性能翻了一番。
2019年的第一代WSE-1基于台积电16nm工艺,面积46225平方毫米,晶体管1.2万亿个,拥有40万个AI核心、18GB SRAM缓存,支持9PB/s内存带宽、100Pb/s互连带宽,功耗高达15千瓦。
2021年的第二代WSE-2升级台积电7nm工艺,面积不变还是46225平方毫米,晶体管增至2.6万亿个,核心数增至85万个,缓存扩至40GB,内存带宽20PB/s,互连带宽220Pb/s。
如今的第三代WSE-3再次升级为台积电5nm工艺,面积没说但应该差不多,毕竟需要一块晶圆才能造出一颗芯片,不可能再大太多了。
晶体管数量继续增加达到惊人的4万亿个,AI核心数量进一步增加到90万个,缓存容量达到44GB,外部搭配内存容量可选1.5TB、12TB、1200TB。
乍一看,核心数量、缓存容量增加的不多,但性能实现了飞跃,峰值AI算力高达125PFlops,也就是每秒12.5亿亿次浮点计算,堪比顶级超算。
它可以训练相当于GPT-4、Gemini十几倍的下一代AI大模型,能在单一逻辑内存空间内存储24万亿参数,无需分区或者重构。
用它来训练1万亿参数大模型的速度,相当于用GPU训练10亿参数。
四颗并联,它能在一天之内完成700亿参数的调教,而且支持最多2048路互连,一天就可以完成Llama 700亿参数的训练。
WSE-3的具体功耗、价格没公布,根据上代的情况看应该在200多万美元。
(蜂耘IT业界网 责任编辑:辛渺)
3月14日消息,Cerebras Systems发布了他们的第三代晶圆级AI加速芯片“WSE-3”(Wafer Scale Engine 3),规格参数更加疯狂,而且在功耗、价格不变的前提下性能翻了一番。
- 2024-04-30
- 2024-04-30
- 2024-04-30
- 2024-04-30
- 2024-04-30
- 2024-04-30
-
石墨烯应用新成果“落地”镇海!防腐新材料实现新突破
来源:镇海新闻
4月26日,镇海石墨烯产业应用又迎来一“新星”——致力于研发石墨烯改性重防腐涂料的宁波云涂新材料科技有限公司(以下简称“云涂新材”),在国家石墨烯创新中心研发设计中心(富邦园区)正式落地开业。作为国家石墨烯创新中心重点孵化项目之一,云涂新材的成立,也为镇海新质生产力的培育与突破,注入了来自石墨烯新材料的强劲动能。2024-04-30
-
广元:推动一批重大铝基新材料项目来广落户
30日,广元市人民政府新闻办公室召开了“2024年中国(广元)绿色铝产业发展大会新闻发布会”。在新闻发布会上,广元市人民政府副市长吴勇通报:由中国有色金属加工工业协会和广元市人民政府共同举办,以“拥抱绿色·铝创未来”为主题的“2024年中国(广元)绿色铝产业发展大会”将于5月9日至11日在该市举行。
2024-04-30
- 2022-08-25
- 2022-10-24
- 2022-10-13
- 2022-09-30
- 2022-10-18
- 2023-03-29
- 2022-11-17
- 2022-10-25
-
一文了解查理·芒格:为什么他是巴菲特最推崇的人
来源:
①巴菲特写道,“如果没有查理的灵感、智慧和参与,伯克希尔-哈撒韦公司不可能发展到今天的地位”;
②芒格曾表示,“如果世上未曾有过查理·芒格这个人,巴菲特的业绩依然会像现在这么漂亮 ”
③两周前,芒格还公开在节目中维护93岁的老友巴菲特。넶31 2023-11-29 -
面壁者,拉里·佩奇
来源:中欧商业评论
这两年,硅谷钢铁侠埃隆·马斯克在社交媒体上口无遮拦,这为他的公司引来了铺天盖地的负面新闻,然而,他的好友、谷歌联合创始人拉里·佩奇却因为看不到人同样被媒体炮轰多时。他已经在公共视野中消失太久了。넶138 2022-06-15 -
百岁中科院院士文圣常逝世!被誉为我国海浪研究的“点灯人”
来源:南方都市报
3月21日上午,中国海洋大学发布讣告,中国科学院院士、著名物理海洋学家、该校教授文圣常,因病医治无效,于3月20日15时37分在山东青岛逝世,享年101岁。넶164 2022-03-21
-
2023人工智能产业生态峰会(深圳站)即将举行!
来源:蜂耘网
本届大会以“产业变革 · 抓住机遇”为主题,聚焦国内人工智能的最新技术理念与解决方案,邀请众多行业大咖、专家学者分享最新的研究成果、技术、解决方案、行业报告、未来发展趋势等。넶157 2023-07-04 -
物流“黑科技”全力竞发 中国(广州)国际物流装备与技术展览会5月强势来袭!
来源:蜂耘网
立足华南联通世界,物流“黑科技”全力竞发!中国(广州)国际物流装备与技术展览会5月强势来袭!넶80 2023-05-05 -
- 2024-04-30
- 2024-04-30
- 2024-04-30
- 2024-04-30
- 2024-04-30
- 2024-04-30
- 2024-04-30
- 2024-04-30
- 2024-04-30
- 2024-04-30
- 2024-04-30
- 2024-04-30