李飛飛叫板梁文鋒?幾百元不到半小時蒸餾出AI模型

最近梁文鋒的DeepSeek很火,震驚了華爾街。那么,問題來了,既然DeepSeek是蒸餾出來的大模型,其他人會不會效仿這種方法。第一個叫板DeepSeek的是華裔李飛飛,據(jù)透露,她僅用50美元,短時間就蒸餾出類似DeepSeek-R1的推理模型S1,該模型在數(shù)學(xué)及編碼能力方面,與OpenAI O1和DeepSeek R1幾乎處于同一水平。

參與研制S1模型的,是李飛飛團隊(包括斯坦福大學(xué)及華盛頓大學(xué)的研究人員)等,花費50美元,折合人民幣大約360元。當(dāng)然,這只是部分成本(云計算費用)。該團隊使用了16個英偉達H100 GPU,用時26分鐘完成了訓(xùn)練過程?。

當(dāng)然,李飛飛團隊的S1模型,同樣是站在前人肩膀上的,秘訣同樣是蒸餾。其以阿里通義團隊的Qwen2.5- 32B-Instruct作為基礎(chǔ)模型,并通過蒸餾谷歌DeepMind的推理模型Gemini 2.0 Flash Thinking實驗版,最終蒸餾出S1模型。目前,該模型已宣布開源,李飛飛研究團隊公布了訓(xùn)練數(shù)據(jù)及代碼。

李飛飛何許人也?她1976年出生于北京,有“AI教母”之稱。據(jù)公開信息,她16歲隨家人移民美國新澤西。她是人工智能方面的專家,美國斯坦福大學(xué)首位紅杉講席教授,長期研究人工智能。2013年至2018年,她擔(dān)任斯坦福人工智能實驗室主任,她還曾擔(dān)任過Google副總裁以及Google Cloud AI/ML首席科學(xué)家。

李飛飛集多重榮耀于一身,是美國國家工程院院士、美國國家醫(yī)學(xué)院院士、美國藝術(shù)與科學(xué)院院士。李飛飛的研究領(lǐng)域主要包括計算機視覺、認知神經(jīng)科學(xué)、計算神經(jīng)科學(xué)和大數(shù)據(jù)分析。

美國工程院對李飛飛的評價是:她為建立大型機器學(xué)習(xí)和視覺理解知識庫做出了貢獻。斯坦福大學(xué)對李飛飛給出了高度評價,認為她是ImageNet和ImageNet Challenge的發(fā)明者,為深度學(xué)習(xí)和AI的最新發(fā)展做出了貢獻。并且,斯坦福大學(xué)還稱贊她,除了技術(shù)貢獻外,還是倡導(dǎo)STEM及AI多樣性的全國領(lǐng)導(dǎo)者。

免責(zé)聲明:此文內(nèi)容為第三方自媒體作者發(fā)布的觀察或評論性文章,所有文字和圖片版權(quán)歸作者所有,且僅代表作者個人觀點,與極客網(wǎng)無關(guān)。文章僅供讀者參考,并請自行核實相關(guān)內(nèi)容。投訴郵箱:editor@fromgeek.com。

免責(zé)聲明:本網(wǎng)站內(nèi)容主要來自原創(chuàng)、合作伙伴供稿和第三方自媒體作者投稿,凡在本網(wǎng)站出現(xiàn)的信息,均僅供參考。本網(wǎng)站將盡力確保所提供信息的準確性及可靠性,但不保證有關(guān)資料的準確性及可靠性,讀者在使用前請進一步核實,并對任何自主決定的行為負責(zé)。本網(wǎng)站對有關(guān)資料所引致的錯誤、不確或遺漏,概不負任何法律責(zé)任。任何單位或個人認為本網(wǎng)站中的網(wǎng)頁或鏈接內(nèi)容可能涉嫌侵犯其知識產(chǎn)權(quán)或存在不實內(nèi)容時,應(yīng)及時向本網(wǎng)站提出書面權(quán)利通知或不實情況說明,并提供身份證明、權(quán)屬證明及詳細侵權(quán)或不實情況證明。本網(wǎng)站在收到上述法律文件后,將會依法盡快聯(lián)系相關(guān)文章源頭核實,溝通刪除相關(guān)內(nèi)容或斷開相關(guān)鏈接。

2025-02-10
李飛飛叫板梁文鋒?幾百元不到半小時蒸餾出AI模型
李飛飛叫板梁文鋒?幾百元不到半小時蒸餾出AI模型

長按掃碼 閱讀全文