近日,由天翼云與華為聯合打造的魔樂(Modelers)開發(fā)者社區(qū),在天翼云中國行·貴州站活動現場上線發(fā)布。依托全場景開源模型資源、易用的模型開發(fā)套件,以及強大的共建共享生態(tài)系統等優(yōu)勢,社區(qū)將使能開發(fā)者高效進行AI應用創(chuàng)新,促進國產AI生態(tài)繁榮!目前,社區(qū)已面向廣大開發(fā)者正式開放注冊。
隨著人工智能技術的飛速發(fā)展,中文AI應用的創(chuàng)新已成為推動行業(yè)發(fā)展的關鍵力量。在此背景下,魔樂開發(fā)者社區(qū)(modelers.cn)應運而生。魔樂社區(qū)致力于聚合優(yōu)質中文AI資源,使能AI應用創(chuàng)新,加速伙伴商業(yè)閉環(huán),通過提供極致易用的工具鏈,端到端支持AI應用開發(fā)的全流程。同時,結合國產化算力的使能,社區(qū)將助力孵化國產原生模型,為開發(fā)者打造一個開放、共享的人工智能生態(tài)社區(qū)。
魔樂社區(qū)集成了開發(fā)工具鏈、模型庫、數據集和體驗空間等核心組件,覆蓋自然語言處理、視覺、音頻等領域,提供原生模型、易用開發(fā)工具、豐富的生態(tài)資源,幫助每一位開發(fā)者獲取領先的人工智能技術,打造出更有競爭力和差異化的模型及應用。
魔樂社區(qū)有什么優(yōu)勢?
1. 資源豐富
a. 海量優(yōu)質中文AI資源
五大專區(qū),1000+優(yōu)質大模型,涵蓋TeleChat等主流大模型,構成了魔樂社區(qū)的豐富資源庫。開發(fā)者在這里不僅可以體驗前沿的AI技術,還可以輕松下載所需的模型,應用到自己的項目中。
b. 千款大模型一鍵式離線復現,使能開發(fā)者快速搭建開發(fā)環(huán)境,構建AI應用
魔樂社區(qū)致力于簡化AI模型開發(fā)流程,讓創(chuàng)新觸手可及。通過一鍵式離線復現功能,開發(fā)者可以迅速搭建自己的開發(fā)環(huán)境,并開始構建AI應用。通過將最佳適配全棧打包、分層解耦,社區(qū)可提供開放的容器鏡像,消除傳統開發(fā)中復雜的環(huán)境搭建流程。無論是資深開發(fā)者還是新手,都能夠在魔樂社區(qū)找到適合自己的工具和資源,輕松實現AI夢想,共同推動技術進步。
c. 7000+高質量數據集資源,讓模型構建全流程更高效
魔樂社區(qū)已與OpenDataLab合作,將逐步接入超7000個數據集,涵蓋計算機視覺、自然語言處理、多模態(tài)、通用機器學習、音頻識別等AI熱門領域。這些數據集經過精心整理與標注,可為用戶提供可靠的數據支撐,助力構建更加精準、可靠的AI模型。
2. 工具齊全
a. 提供高易用性的API,僅需幾行代碼即可實現微調、推理等任務,快速實現開發(fā)者與研究人員的創(chuàng)意
魔樂社區(qū)提供的開發(fā)套件,支持從模型訓練到部署的全流程,原生兼容PyTorch 和 MindSpore等主流框架,通過幾行代碼即可實現模型微調、推理等任務。
以“星辰TeleChat_12B對話”為例,開發(fā)者可以在該模型主頁獲取詳盡的“模型介紹”,包括其架構、參數和性能指標。頁面上可一鍵訪問數據集,無縫切換至體驗空間,利用魔樂社區(qū)提供的工具和容器鏡像,實現離線復現和應用開發(fā),讓創(chuàng)新觸手可及。
b. 支持 Accelerate、MindSpeed等主流加速庫,讓模型訓練更輕松
魔樂社區(qū)支持 Accelerate、MindSpeed等主流加速庫。這些加速庫通過優(yōu)化并行算法、通信協議和顯存資源管理,顯著提升了計算效率,縮短了訓練時間,讓大模型的訓練變得更加輕松和快速。
c. 支持昇騰NPU等多種處理器,無需修改代碼即可靈活切換計算資源
借助魔樂社區(qū)提供的工具鏈,開發(fā)者可通過簡單的參數配置,輕松匹配業(yè)務訴求,實現在多種算力間的靈活選擇。這一設計不僅減少了開發(fā)過程中的復雜性,也極大提升了資源的利用效率。無論是處理大規(guī)模數據集還是進行復雜的計算任務,魔樂社區(qū)都能提供強大的后端支持,確保開發(fā)者能夠專注于創(chuàng)新和優(yōu)化算法本身。
3. 算力資源充沛
魔樂社區(qū)依托天翼云等企業(yè)的算力資源支持,為用戶提供了高性能的計算環(huán)境。無論是模型訓練還是推理部署,用戶都能享受到流暢的計算體驗。
作為國內領先的云計算服務提供商,天翼云在構建AI開發(fā)者社區(qū)方面展現出了獨特的優(yōu)勢:
a.提供免費的國產化算力資源,支持體驗空間在線推理
b. 算力資源充沛,為社區(qū)提供穩(wěn)定、高效的智算資源
天翼云擁有覆蓋全國的智算算力布局,圍繞AI產業(yè)集聚區(qū)規(guī)劃建設北京、上海、廣東、浙江、安徽人工智能公共算力中心,智算總規(guī)模已達到21EFLOPS。天翼云在上海、北京打造的萬卡池,是全國最早建成并真正投產運行的兩個國產化、全液冷、單集群萬卡公共智算中心。依托自身智能算力布局,天翼云能夠為魔樂開發(fā)者社區(qū)提供穩(wěn)定、高效的智算資源。
c.提供先進的技術平臺:
天翼云息壤一體化智算服務平臺面向行業(yè)大模型訓推場景,提供模型開發(fā)、訓練、調優(yōu)的全鏈路服務。通過自研訓練框架,打造核心加速算子集合,支持多維度混合全自動并行,提供萬卡級超大規(guī)模異構模型訓練能力,自動兼容國產芯片,實現與頭部訓推框架的無縫對接,覆蓋行業(yè)主流開源大模型,將訓練效率提升了50%;通過自研推理框架,構建推理加速算子集合、量化壓縮模型輕量化技術,提供異構硬件的推理能力,使推理速度提升28%。平臺基于軟硬件協同設計,打造了全鏈路故障感知和恢復、全鏈路日志監(jiān)控和斷點續(xù)訓&續(xù)推等核心技術,大幅提升有效訓練時間和推理可用性,保障大模型訓推場景穩(wěn)定高效運行。
攜手開發(fā)者,共筑AI新生態(tài)
魔樂社區(qū)誠摯地邀請每一位開發(fā)者加入這個大家庭,共同探索AI無限潛力。在這里,您可以與全球的AI愛好者交流心得、分享經驗;可以快速利用大量的模型資源以及高質量的數據集資源,快速構建并分享自己的AI應用;也可以借助充沛的算力資源與齊全的開發(fā)工具鏈,將創(chuàng)意與想法轉化為現實。讓我們攜手并進,在AI的征途中不斷前行,共筑AI新生態(tài)。
(免責聲明:本網站內容主要來自原創(chuàng)、合作伙伴供稿和第三方自媒體作者投稿,凡在本網站出現的信息,均僅供參考。本網站將盡力確保所提供信息的準確性及可靠性,但不保證有關資料的準確性及可靠性,讀者在使用前請進一步核實,并對任何自主決定的行為負責。本網站對有關資料所引致的錯誤、不確或遺漏,概不負任何法律責任。
任何單位或個人認為本網站中的網頁或鏈接內容可能涉嫌侵犯其知識產權或存在不實內容時,應及時向本網站提出書面權利通知或不實情況說明,并提供身份證明、權屬證明及詳細侵權或不實情況證明。本網站在收到上述法律文件后,將會依法盡快聯系相關文章源頭核實,溝通刪除相關內容或斷開相關鏈接。 )