頂點(diǎn)光電子商城2024年3月15日消息:近日,Cerebras Systems 推出了其晶圓級(jí)引擎 3 (WSE-3),這是一款突破性的 AI 晶圓級(jí)芯片,其性能是其前身 WSE-2 的兩倍。
這款芯片具有驚人的4萬(wàn)億個(gè)晶體管。這款芯片被定位為比英偉達(dá)顯卡更高效的替代品,其尺寸巨大,是目前最大GPU面積的56倍。此外,WSE-3采用了晶圓大小的設(shè)計(jì),將4萬(wàn)億個(gè)晶體管組織在90萬(wàn)個(gè)核心中,針對(duì)人工智能訓(xùn)練的工作負(fù)載進(jìn)行了優(yōu)化。
據(jù)Cerebras Systems公司稱,配備了2048個(gè)WSE-3芯片的服務(wù)器集群可以在一天內(nèi)訓(xùn)練出市場(chǎng)上最先進(jìn)的開源語(yǔ)言模型之一。WSE-3的巨大尺寸有助于加快數(shù)據(jù)傳輸和減少處理時(shí)間,從而提高人工智能的處理速度。
此外,WSE-3的性能也非常出色,峰值A(chǔ)I算力高達(dá)125PFlops,即每秒12.5億億次浮點(diǎn)計(jì)算,可媲美頂級(jí)超算。在四顆并聯(lián)的情況下,一天內(nèi)即可完成700億參數(shù)的調(diào)教,支持最多2048路互連,一天便可完成Llama 700億參數(shù)的訓(xùn)練。
這款芯片不僅完全碾壓了英偉達(dá)H100 GPU的晶體管數(shù)量,核處理器數(shù)也是單個(gè)英偉達(dá)H100 GPU的52倍,片上存儲(chǔ)量則是H100的880倍。
Cerebras Systems推出的這款WSE-3 AI芯片無(wú)疑是人工智能領(lǐng)域的一大突破,為人工智能的訓(xùn)練和處理提供了更高效、更快速的解決方案。