8月28日,2024中國國際大數據產業博覽會在貴陽開幕。以“聚數乘云 天翼賦能數字經濟新生態”為主題的天翼云中國行·貴州站“數據賦能”交流活動在會議同期舉行。貴州省政府、國家數據局等單位領導,中國電信集團以及多家合作伙伴代表出席會議,共同見證了魔樂(Modelers)開發者社區上線。
當前我國人工智能產業迅速發展的同時,也面臨中文資源缺乏匯聚共享與合規治理、國產化環境下工具鏈使用門檻高、技術創新和商業落地閉環難度大等諸多挑戰。針對這些挑戰,魔樂(Modelers)開發者社區通過集成模型庫、數據集和體驗空間、開發工具鏈等核心組件,提供模型托管與共享,模型預訓練、微調、部署和推理等功能,幫助開發者獲取領先的人工智能技術,打造出更有競爭力和差異化的模型及應用。
社區將發揮全場景開源模型資源、易用的模型開發套件以及強大的社區共建共享生態系統等優勢,為開發者提供強大的工具和資源平臺,更為推動整個人工智能領域的發展和創新提供堅實的基礎。通過建設社區,天翼云將進一步團結國內AI產業鏈,構建中文環境下的算力、數據、模型、應用和新CDMA服務,攜手業界共同繁榮國產AI生態,共創中國AI未來。
日,由天翼云與華為聯合打造的魔樂(Modelers)開發者社區,在天翼云中國行·貴州站活動現場上線發布。依托全場景開源模型資源、易用的模型開發套件,以及強大的共建共享生態系統等優勢,社區將使能開發者高效進行AI應用創新,促進國產AI生態繁榮!目前,社區已面向廣大開發者正式開放注冊。
隨著人工智能技術的飛速發展,中文AI應用的創新已成為推動行業發展的關鍵力量。在此背景下,魔樂開發者社區(modelers.cn)應運而生。魔樂社區致力于聚合優質中文AI資源,使能AI應用創新,加速伙伴商業閉環,通過提供極致易用的工具鏈,端到端支持AI應用開發的全流程。同時,結合國產化算力的使能,社區將助力孵化國產原生模型,為開發者打造一個開放、共享的人工智能生態社區。
魔樂社區集成了開發工具鏈、模型庫、數據集和體驗空間等核心組件,覆蓋自然語言處理、視覺、音頻等領域,提供原生模型、易用開發工具、豐富的生態資源,幫助每一位開發者獲取領先的人工智能技術,打造出更有競爭力和差異化的模型及應用。
魔樂社區有什么優勢?
01資源豐富
? 海量優質中文AI資源
五大專區,1000+優質大模型,涵蓋TeleChat等主流大模型,構成了魔樂社區的豐富資源庫。開發者在這里不僅可以體驗前沿的AI技術,還可以輕松下載所需的模型,應用到自己的項目中。
? 千款大模型一鍵式離線復現,使能開發者快速搭建開發環境,構建AI應用
魔樂社區致力于簡化AI模型開發流程,讓創新觸手可及。通過一鍵式離線復現功能,開發者可以迅速搭建自己的開發環境,并開始構建AI應用。通過將最佳適配全棧打包、分層解耦,社區可提供開放的容器鏡像,消除傳統開發中復雜的環境搭建流程。無論是資深開發者還是新手,都能夠在魔樂社區找到適合自己的工具和資源,輕松實現AI夢想,共同推動技術進步。
? 7000+高質量數據集資源,讓模型構建全流程更高效
魔樂社區已與OpenDataLab合作,將逐步接入超7000個數據集,涵蓋計算機視覺、自然語言處理、多模態、通用機器學習、音頻識別等AI熱門領域。這些數據集經過精心整理與標注,可為用戶提供可靠的數據支撐,助力構建更加精準、可靠的AI模型。
02工具齊全
? 提供高易用性的API,僅需幾行代碼即可實現微調、推理等任務,快速實現開發者與研究人員的創意
魔樂社區提供的開發套件,支持從模型訓練到部署的全流程,原生兼容PyTorch和MindSpore等主流框架,通過幾行代碼即可實現模型微調、推理等任務。
以“星辰TeleChat_12B對話”為例,開發者可以在該模型主頁獲取詳盡的“模型介紹”,包括其架構、參數和性能指標。頁面上可一鍵訪問數據集,無縫切換至體驗空間,利用魔樂社區提供的工具和容器鏡像,實現離線復現和應用開發,讓創新觸手可及。
? 支持Accelerate、MindSpeed等主流加速庫,讓模型訓練更輕松
魔樂社區支持Accelerate、MindSpeed等主流加速庫。這些加速庫通過優化并行算法、通信協議和顯存資源管理,顯著提升了計算效率,縮短了訓練時間,讓大模型的訓練變得更加輕松和快速。
? 支持多種處理器,無需修改代碼即可靈活切換計算資源
借助魔樂社區提供的工具鏈,開發者可通過簡單的參數配置,輕松匹配業務訴求,實現在多種算力間的靈活選擇。這一設計不僅減少了開發過程中的復雜性,也極大提升了資源的利用效率。無論是處理大規模數據集還是進行復雜的計算任務,魔樂社區都能提供強大的后端支持,確保開發者能夠專注于創新和優化算法本身。
03算力資源充沛
魔樂社區依托天翼云等企業的算力資源支持,為用戶提供了高性能的計算環境。無論是模型訓練還是推理部署,用戶都能享受到流暢的計算體驗。
作為國內領先的云計算服務提供商,天翼云在構建AI開發者社區方面展現出了獨特的優勢:
? 提供免費的國產化算力資源,支持體驗空間在線推理
? 算力資源充沛,為社區提供穩定、高效的智算資源
天翼云擁有覆蓋全國的智算算力布局,圍繞AI產業集聚區規劃建設北京、上海、廣東、浙江、安徽人工智能公共算力中心,智算總規模已達到21EFLOPS。天翼云在上海、北京打造的萬卡池,是全國最早建成并真正投產運行的兩個國產化、全液冷、單集群萬卡公共智算中心。依托自身智能算力布局,天翼云能夠為魔樂開發者社區提供穩定、高效的智算資源。
? 提供先進的技術平臺
天翼云息壤一體化智算服務平臺面向行業大模型訓推場景,提供模型開發、訓練、調優的全鏈路服務。通過自研訓練框架,打造核心加速算子集合,支持多維度混合全自動并行,提供萬卡級超大規模異構模型訓練能力,自動兼容國產芯片,實現與頭部訓推框架的無縫對接,覆蓋行業主流開源大模型,將訓練效率提升了50%;通過自研推理框架,構建推理加速算子集合、量化壓縮模型輕量化技術,提供異構硬件的推理能力,使推理速度提升28%。平臺基于軟硬件協同設計,打造了全鏈路故障感知和恢復、全鏈路日志監控和斷點續訓&續推等核心技術,大幅提升有效訓練時間和推理可用性,保障大模型訓推場景穩定高效運行。
攜手開發者,共筑AI新生態
魔樂社區誠摯地邀請每一位開發者加入這個大家庭,共同探索AI無限潛力。在這里,您可以與全球的AI愛好者交流心得、分享經驗;可以快速利用大量的模型資源以及高質量的數據集資源,快速構建并分享自己的AI應用;也可以借助充沛的算力資源與齊全的開發工具鏈,將創意與想法轉化為現實。讓我們攜手并進,在AI的征途中不斷前行,共筑AI新生態。
開發者們可掃描下方二維碼加入群聊