12月5日消息,亞馬遜云科技在2024 re:Invent全球大會上,發(fā)布了新一代AI訓(xùn)練芯片Amazon Trainium3。
據(jù)介紹,Trainium3是亞馬遜云科技首款采用3納米工藝制造的芯片,專為新一代前沿生成式AI工作負(fù)載的高性能需求而設(shè)計,在性能、能效和密度上樹立了新標(biāo)桿。搭載Trainium3的UltraServers性能預(yù)計將是Trn2 UltraServers的4倍,使客戶在構(gòu)建模型時能夠更快迭代,并在部署時提供卓越的實時性能。首批基于Trainium3的實例預(yù)計將在2025年末上線。
另外,會上還宣布基于Amazon Trainium2的Amazon Elastic Compute Cloud(Amazon EC2)Trn2實例正式可用,并推出全新的Amazon EC2 Trn2 UltraServers,讓用戶以優(yōu)越的性價比訓(xùn)練和部署最新的人工智能模型,以及未來的大語言模型(LLM)和基礎(chǔ)模型(FM)。
與當(dāng)前基于GPU的EC2 P5e和P5en實例相比,Amazon EC2 Trn2實例的性價比提升30-40%。它配備16個Trainium2芯片,可提供高達(dá)20.8 Petaflops浮點算力的性能。
Amazon EC2 Trn2 UltraServers服務(wù)器機型配備64個相互連接的Trainium2芯片,采用NeuronLink超速互連技術(shù),可提供高達(dá)83.2 Petaflops浮點算力,其計算、內(nèi)存和網(wǎng)絡(luò)能力是單一實例的四倍,能夠支持訓(xùn)練和部署超大規(guī)模的模型。
上周,亞馬遜宣布向Anthropic追加第二筆40億美元投資,并加深在業(yè)務(wù)上的合作。
2024 re:Invent全球大會上透露,作為Anthropic與亞馬遜云科技深化合作的一部分,Anthropic已開始優(yōu)化Claude模型,以便在亞馬遜Trainium2上運行。
同時,亞馬遜云科技正在與Anthropic共同構(gòu)建一個名為Project Rainier的 EC2 UltraCluster計算集群,該集群由Trn2 UltraServers組成,能夠在數(shù)十萬個Trainium2芯片之間通過第三代低延遲的PB級EFA網(wǎng)絡(luò)進(jìn)行分布式模型訓(xùn)練——其運算能力比Anthropic當(dāng)前一代領(lǐng)先AI模型訓(xùn)練所需算力高出5倍以上。該項目完成后,預(yù)計將成為全球最大可用的AI計算集群,供Anthropic構(gòu)建和部署未來模型使用。(果青)
- 樂道汽車強制員工購車?高管回應(yīng)
- BBA去年全球銷量齊下滑 中國市場寶馬跌幅最大
- “借機玩?!??多家互聯(lián)網(wǎng)公司在小紅書發(fā)英文貼攬客
- 一夜之間在美霸榜,小紅書能否接住潑天流量?
- 寒武紀(jì)2024年虧損額收窄 全年預(yù)虧3.96億-4.84億
- 小鵬汽車自動駕駛負(fù)責(zé)人體驗特斯拉 FSD:中美路況差異顯著,小鵬更適應(yīng)中國復(fù)雜路況
- 美國人涌入,傳小紅書2天新增超70萬用戶
- 春運自駕預(yù)計72億人次 高德地圖推出針對新能源車主的專項服務(wù)
- 第四屆OceanBase數(shù)據(jù)庫大賽落幕 北理工OBCraft隊奪得特等獎
- 京東升至脈脈職得去公司電商榜TOP1
免責(zé)聲明:本網(wǎng)站內(nèi)容主要來自原創(chuàng)、合作伙伴供稿和第三方自媒體作者投稿,凡在本網(wǎng)站出現(xiàn)的信息,均僅供參考。本網(wǎng)站將盡力確保所提供信息的準(zhǔn)確性及可靠性,但不保證有關(guān)資料的準(zhǔn)確性及可靠性,讀者在使用前請進(jìn)一步核實,并對任何自主決定的行為負(fù)責(zé)。本網(wǎng)站對有關(guān)資料所引致的錯誤、不確或遺漏,概不負(fù)任何法律責(zé)任。任何單位或個人認(rèn)為本網(wǎng)站中的網(wǎng)頁或鏈接內(nèi)容可能涉嫌侵犯其知識產(chǎn)權(quán)或存在不實內(nèi)容時,應(yīng)及時向本網(wǎng)站提出書面權(quán)利通知或不實情況說明,并提供身份證明、權(quán)屬證明及詳細(xì)侵權(quán)或不實情況證明。本網(wǎng)站在收到上述法律文件后,將會依法盡快聯(lián)系相關(guān)文章源頭核實,溝通刪除相關(guān)內(nèi)容或斷開相關(guān)鏈接。