C114訊 12月19日專(zhuān)稿(趙婷婷 蔣均牧)人工智能作為引領(lǐng)未來(lái)的戰(zhàn)略性技術(shù),正在深刻改變著我們的世界。而在A(yíng)I產(chǎn)業(yè)發(fā)展的過(guò)程中,AI框架扮演了至關(guān)重要的角色。
昇思MindSpore框架自2020年開(kāi)源以來(lái),憑借其高效、靈活、易用等特點(diǎn),迅速在A(yíng)I框架領(lǐng)域嶄露頭角,成為大模型時(shí)代越來(lái)越多開(kāi)發(fā)者的首選。據(jù)預(yù)測(cè),中國(guó)AI框架2024年新增市場(chǎng)昇思份額將達(dá)30%。
昇思MindSpore為何能在四年中實(shí)現(xiàn)如此巨大的突破及跨越?其成果與經(jīng)驗(yàn)將給AI產(chǎn)業(yè)帶來(lái)怎樣的推動(dòng)和啟迪?產(chǎn)業(yè)界又該如何聚力匯智,以加速我國(guó)AI框架發(fā)展?從剛剛舉行的昇思人工智能框架峰會(huì)上,我們或許可以找到答案。
據(jù)C114了解,本次峰會(huì)以“創(chuàng)新源動(dòng)力,框架新選擇”為主題,由昇思MindSpore開(kāi)源社區(qū)、中國(guó)人工智能學(xué)會(huì)及AITISA聯(lián)合主辦,旨在匯聚AI產(chǎn)業(yè)界、學(xué)術(shù)界力量,共建人工智能框架開(kāi)源生態(tài),共探人工智能框架新未來(lái)。會(huì)上,18家單位發(fā)布了基于昇思的原生開(kāi)發(fā)大模型成果。
開(kāi)源四年:昇思的跨越式發(fā)展
在A(yíng)I技術(shù)體系中,AI框架處于“承上啟下”的位置,南向使能多樣化算力,北向孵化各類(lèi)算法模型,是AI應(yīng)用創(chuàng)新的土壤和源泉。2020年3月28日,華為正式開(kāi)源了昇思MindSpore框架,攜手產(chǎn)業(yè)界、開(kāi)發(fā)者,共建AI開(kāi)源框架繁榮生態(tài)。歷經(jīng)四年成長(zhǎng),昇思的框架版本持續(xù)演進(jìn),技術(shù)與社區(qū)生態(tài)取得蓬勃發(fā)展,已然成為中國(guó)發(fā)展最快的開(kāi)源AI框架,實(shí)現(xiàn)了從初出茅廬到躋身全球主流AI框架第一梯隊(duì)的跨越式發(fā)展。
版本演進(jìn)上,從全場(chǎng)景AI框架MindSpore 1.0、首個(gè)支持原生支持大模型的MindSpore 1.5、原生支持AI4S(AI for Science)的MindSpore 1.8、AI融合框架MindSpore 2.0到超節(jié)點(diǎn)原生的MindSpore 2.4,昇思在技術(shù)創(chuàng)新方面取得了持續(xù)性的突破,不僅提升了框架的性能和易用性,更推動(dòng)了AI產(chǎn)業(yè)的整體進(jìn)步。
生態(tài)建設(shè)方面,昇思MindSpore目前已孵化、支持50多個(gè)國(guó)內(nèi)外主流大模型。開(kāi)源社區(qū)已匯聚了超過(guò)3.7萬(wàn)開(kāi)發(fā)者,全球下載量突破1100萬(wàn),覆蓋全球130多個(gè)國(guó)家和地區(qū)的2400多個(gè)城市。同時(shí),昇思與360多所高?蒲性核归_(kāi)教學(xué)及科研合作,聯(lián)合1700多位生態(tài)伙伴,打造超過(guò)2000個(gè)解決方案。PaperwithCode網(wǎng)站顯示,基于昇思的原創(chuàng)論文發(fā)表累計(jì)超過(guò)1700篇,位列全球第二、中國(guó)第一。
根據(jù)中國(guó)科學(xué)院科技戰(zhàn)略咨詢(xún)研究院分享的測(cè)算結(jié)果,在中國(guó)AI框架2024年新增市場(chǎng)中,昇思份額將達(dá)30%。這標(biāo)志著昇思MindSpore成為大模型時(shí)代AI框架的新選擇,作為中國(guó)乃至世界的框架“新勢(shì)力”,引領(lǐng)技術(shù)創(chuàng)新,加速全面智能化時(shí)代到來(lái)。
中國(guó)人工智能學(xué)會(huì)副理事長(zhǎng)、中國(guó)工程院院士何友在致辭中指出,昇思作為自主創(chuàng)新的AI框架,在大模型時(shí)代的開(kāi)源實(shí)踐尤為重要。昇思框架以開(kāi)源社區(qū)為陣地,不斷促進(jìn)AI技術(shù)創(chuàng)新和知識(shí)共享,降低了AI開(kāi)發(fā)者門(mén)檻,使更多人參與,為學(xué)術(shù)界和產(chǎn)業(yè)界打造了友好、高效、靈活的人工智能創(chuàng)新工具。
中國(guó)科學(xué)院科技戰(zhàn)略咨詢(xún)研究院學(xué)術(shù)委員會(huì)副主任劉海波指出,開(kāi)源創(chuàng)新是驅(qū)動(dòng)AI技術(shù)創(chuàng)新的關(guān)鍵力量,我國(guó)在算法、平臺(tái)、應(yīng)用等方面都取得了實(shí)質(zhì)性進(jìn)展。昇思MindSpore作為國(guó)內(nèi)主流開(kāi)源框架,在生態(tài)建設(shè)和技術(shù)創(chuàng)新方面取得了顯著成績(jī)。未來(lái),我國(guó)需要繼續(xù)在A(yíng)I框架內(nèi)培養(yǎng)創(chuàng)新主導(dǎo)者,推出更多有力政策推動(dòng)開(kāi)源創(chuàng)新的發(fā)展。
華為ICT戰(zhàn)略與業(yè)務(wù)發(fā)展部總裁彭紅華表示,人工智能框架是AI時(shí)代的操作系統(tǒng)與軟件底座,領(lǐng)先的AI框架需要同時(shí)具備“更高效、更敏捷、更開(kāi)放”的技術(shù)與生態(tài)能力。未來(lái),華為將持續(xù)投入昇思MindSpore,堅(jiān)持以開(kāi)源的方式,向業(yè)界開(kāi)放技術(shù)創(chuàng)新成果,攜手產(chǎn)業(yè)界客戶(hù)、伙伴和廣大開(kāi)發(fā)者共促中國(guó)人工智能框架生態(tài)健康、高速發(fā)展。
持續(xù)迭代創(chuàng)新:打造AI創(chuàng)新源動(dòng)力
“問(wèn)渠哪得清如許,為有源頭活水來(lái)”,昇思MindSpore框架的持續(xù)迭代創(chuàng)新正是其脫穎而出的關(guān)鍵,也是其助力廣大開(kāi)發(fā)者應(yīng)對(duì)挑戰(zhàn)、把握機(jī)遇的根本。
面向AI技術(shù)日新月異的發(fā)展,特別是大模型技術(shù)的加速演進(jìn),昇思圍繞開(kāi)發(fā)者編程體驗(yàn)、大模型訓(xùn)練及AI框架基礎(chǔ)能力,持續(xù)升級(jí)框架架構(gòu),使能AI模型未來(lái)創(chuàng)新。
在開(kāi)發(fā)者編程體驗(yàn)方面,昇思MindSpore提供一致開(kāi)發(fā)體驗(yàn),持續(xù)降低遷移學(xué)習(xí)成本。例如針對(duì)AI4S場(chǎng)景,昇思MindSpore提供了數(shù)學(xué)家更親和的函數(shù)式編程體驗(yàn),原生支持Python3、NumPy等科學(xué)計(jì)算的接口加速,結(jié)合自動(dòng)微分能力和機(jī)制加速進(jìn)行編譯優(yōu)化,使得科學(xué)計(jì)算更加高效便捷。通過(guò)持續(xù)升級(jí)底層函數(shù)式編程體驗(yàn),并打造高性能AI4S使能套件,昇思聯(lián)合行業(yè)用戶(hù)、科研機(jī)構(gòu)、學(xué)術(shù)專(zhuān)家共同加速科研創(chuàng)新,推動(dòng)科技進(jìn)步。
在大模型訓(xùn)練方面,昇思MindSpore在設(shè)計(jì)之初就構(gòu)筑了框架原生分布式并行能力,以應(yīng)對(duì)快速迭代的模型技術(shù)。這種能力最大化實(shí)現(xiàn)了算法泛化性,為面向多模態(tài)、長(zhǎng)序列、MoE等主流場(chǎng)景提供了多維混合分布式并行算法。同時(shí),昇思還提供了業(yè)界首創(chuàng)的并行策略自動(dòng)配置能力,將萬(wàn)億MoE訓(xùn)練效率提升50%以上。結(jié)合自動(dòng)搜索仿真調(diào)優(yōu),為大模型訓(xùn)練節(jié)約端到端成本。
在加速應(yīng)用落地方面,昇思MindSpore聚焦生成式AI的快速開(kāi)發(fā)和端側(cè)部署,持續(xù)演進(jìn)套件化開(kāi)發(fā)及部署能力。例如能夠在6小時(shí)內(nèi)復(fù)現(xiàn)LLaMA3.1-7B模型,天級(jí)即可完成典型大語(yǔ)言模型部署。此外,昇思MindSpore還創(chuàng)新了訓(xùn)推同構(gòu)架構(gòu),強(qiáng)化了大模型從訓(xùn)練到推理的快交互能力,加速了強(qiáng)化學(xué)習(xí)類(lèi)大模型的推理與應(yīng)用部署。
多模型多任務(wù)引擎方面,昇思MindSpore面向OpenAI o1等新型模型范式帶來(lái)的技術(shù)挑戰(zhàn),完善多模型多任務(wù)調(diào)度、訓(xùn)推無(wú)縫轉(zhuǎn)換能力,強(qiáng)化學(xué)習(xí)親和架構(gòu),加速類(lèi)o1模型演進(jìn)升級(jí)。
在成果發(fā)布環(huán)節(jié),昇思攜手18家生態(tài)伙伴重磅發(fā)布基于昇思AI框架的大模型原生開(kāi)發(fā)成果,面向金融、工業(yè)、互聯(lián)網(wǎng)、電信、能源、交通等重點(diǎn)行業(yè)推出豐富的AI應(yīng)用,加速千行萬(wàn)業(yè)數(shù)智化升級(jí)。未來(lái)昇思將繼續(xù)攜手生態(tài)伙伴共同加速原生開(kāi)發(fā),推動(dòng)科研落地與產(chǎn)業(yè)創(chuàng)新。
與開(kāi)發(fā)者共成長(zhǎng):做大做強(qiáng)產(chǎn)業(yè)生態(tài)
“孤舉者難起,眾行者易趨”,與開(kāi)發(fā)者共成長(zhǎng)的實(shí)際行動(dòng),開(kāi)放、包容、共贏(yíng)的社區(qū)環(huán)境,同“產(chǎn)學(xué)研用”各方的緊密合作,為昇思的迅速崛起和行穩(wěn)致遠(yuǎn)奠定了基礎(chǔ)。
昇思MindSpore開(kāi)源社區(qū)理事長(zhǎng)丁誠(chéng)表示,開(kāi)發(fā)者是推動(dòng)昇思社區(qū)發(fā)展的中堅(jiān)力量,昇思將提供分層分級(jí)的學(xué)習(xí)與發(fā)展體系,通過(guò)學(xué)習(xí)、實(shí)踐、專(zhuān)項(xiàng)學(xué)術(shù)論文基金、社區(qū)項(xiàng)目支持等方式,發(fā)展開(kāi)發(fā)者、鼓勵(lì)技術(shù)創(chuàng)新、激勵(lì)成果落地。在開(kāi)發(fā)者回饋社區(qū)、貢獻(xiàn)社區(qū)、共建社區(qū)的過(guò)程中,與開(kāi)發(fā)者共成長(zhǎng)。
據(jù)介紹,昇思社區(qū)堅(jiān)持開(kāi)放治理,通過(guò)社區(qū)理事會(huì)成員共同管理、決策、規(guī)劃社區(qū)整體發(fā)展;技術(shù)委員會(huì)看護(hù)整體方案架構(gòu),共同決策社區(qū)技術(shù)迭代演進(jìn);SIG興趣小組看護(hù)具體技術(shù)領(lǐng)域,管理日程開(kāi)發(fā)與維護(hù)等方式共治框架未來(lái)。
開(kāi)源中國(guó)CTO紅薯描述了碼云(Gitee)平臺(tái)上昇思MindSpore項(xiàng)目的繁榮景象。他表示,昇思在碼云上的指數(shù)得分一直很高,穩(wěn)居AI開(kāi)源項(xiàng)目第一。碼云通過(guò)提供可靠的基礎(chǔ)設(shè)施和豐富的開(kāi)源項(xiàng)目資源,助力昇思框架的開(kāi)源生態(tài)建設(shè)。未來(lái),碼云將繼續(xù)與昇思合作,促進(jìn)AI共生繁榮。
另一方面,昇思與眾多企業(yè)、研究機(jī)構(gòu)、算力專(zhuān)家團(tuán)隊(duì)建立了緊密的合作關(guān)系,以多種方式支持昇思原生大模型孵化,并匯聚各類(lèi)伙伴成立產(chǎn)業(yè)聯(lián)合體,打通產(chǎn)學(xué)研用通路,加速成果轉(zhuǎn)化落地。例如昇思MindSpore與中國(guó)人工智能學(xué)會(huì)、鵬城實(shí)驗(yàn)室聯(lián)合發(fā)布了昇思MindSpore論文基金,為科研創(chuàng)新提供經(jīng)費(fèi)、算力、技術(shù)支持等服務(wù)。
智譜AI CEO張鵬分享了智譜AI與昇思在在代碼生成領(lǐng)域的合作經(jīng)驗(yàn)。他表示,在大模型時(shí)代,AI框架的分布式并行能力、訓(xùn)練與推理的一致性、部署可用性等方面至關(guān)重要。智譜AI與昇思框架在CodeGeeX和CogVLM2-video等項(xiàng)目中展開(kāi)了深度合作,取得了顯著成果。未來(lái),雙方將繼續(xù)發(fā)揮各自?xún)?yōu)勢(shì),推動(dòng)自主創(chuàng)新的AI生態(tài)蓬勃發(fā)展。
南方電網(wǎng)公司戰(zhàn)略總監(jiān)、規(guī)劃部總經(jīng)理、科研院董事長(zhǎng)鄭外生介紹了基于昇思平臺(tái)自主開(kāi)發(fā)的,以AI科學(xué)計(jì)算的電力系統(tǒng)智能仿真器“馭電”,主要應(yīng)用于具有大規(guī)模新能源電網(wǎng),能在確保電網(wǎng)安全前提下,最大限度利用新能源,解決當(dāng)前新興電力系統(tǒng)建設(shè)最大的痛點(diǎn)問(wèn)題。通過(guò)昇思MindSpore的支持,“馭電”仿真器實(shí)現(xiàn)了毫秒級(jí)、上千場(chǎng)景的快速分析,相比傳統(tǒng)的數(shù)字仿真,計(jì)算速度提高了上千倍,平均誤差小于1%。
會(huì)上,昇思開(kāi)源社區(qū)對(duì)杰出貢獻(xiàn)者進(jìn)行了表彰,為昇思MindSpore模型開(kāi)發(fā)挑戰(zhàn)賽金獎(jiǎng)?lì)C獎(jiǎng),19名開(kāi)發(fā)者及5名布道師獲得昇思MindSpore開(kāi)源社區(qū)2024年度杰出開(kāi)發(fā)者及布道師稱(chēng)號(hào)。
寫(xiě)在最后
正如彭紅華所言,華為一直堅(jiān)持打造開(kāi)放的計(jì)算產(chǎn)業(yè)生態(tài),堅(jiān)持根技術(shù)創(chuàng)新,與產(chǎn)業(yè)界共同打造堅(jiān)實(shí)的、可持續(xù)的計(jì)算產(chǎn)業(yè)生態(tài)。從此次峰會(huì)中不難看出,昇思作為華為在A(yíng)I領(lǐng)域的一項(xiàng)創(chuàng)舉,通過(guò)堅(jiān)持開(kāi)放合作、持續(xù)創(chuàng)新的發(fā)展理念以及不斷完善生態(tài)體系和應(yīng)用落地工作等方面的努力,短短四年時(shí)間便取得了顯著的成績(jī)和進(jìn)展,并展現(xiàn)出了廣闊的發(fā)展前景和潛力。
“開(kāi)源開(kāi)放為舟,技術(shù)創(chuàng)新作帆”,相信在未來(lái)的日子里,昇思也將繼續(xù)引領(lǐng)AI框架技術(shù)的發(fā)展潮流,在A(yíng)I的浩瀚征程中勇往直前,為全社會(huì)、全行業(yè)的數(shù)字化轉(zhuǎn)型和智能化升級(jí)貢獻(xiàn)更多的力量和價(jià)值。