人工智能大模型落地難?昇騰AI三步走打通斷點

極客網(wǎng)·極客觀察(朱飛)6月22日 人工智能給社會帶來的改變,可能已經(jīng)超乎你的想象!

你知道嗎?我國共有2700多萬聽障人士,他們面臨溝通難、就業(yè)難等問題。背后的根本原因在于手語知識學習困難,包括手語詞匯匱乏、手語師資短缺、手語標準難統(tǒng)一等。如果能有一位手語詞匯量豐富、手語“普通話”標準,且能夠隨時隨地在線教學的老師授業(yè)解惑,這些困難將得到極大改善。

AI手語老師,正在讓改變發(fā)生。千博信息與中科院自動化所、華為三方聯(lián)手,基于昇騰AI基礎軟硬件平臺以及紫東.太初三模態(tài)大模型,打造出手語多模態(tài)模型并發(fā)布手語教考一體機,實現(xiàn)了手語動作與示意圖片和文字的聯(lián)動,讓初學者更加方便地理解手語,幫助學生隨學隨練隨考,高效學習,在解決手語師資短缺的同時,還能統(tǒng)一手語“方言”,推廣手語標準,大幅改善了特殊人群的學習環(huán)境。

1.jpg

與傳統(tǒng)的AI開發(fā)及應用落地方式不同,手語教考一體機能夠深化手語教育領域的智能化轉(zhuǎn)型,得益于業(yè)內(nèi)首個千億參數(shù)多模態(tài)大模型紫東.太初的加速使能。紫東.太初是中科院自動化所研發(fā)的全球首個視覺-文本-語音三模態(tài)大模型,具備跨模態(tài)的理解和生成能力,能夠讓AI交互更加智慧、自然。千博信息基于紫東.太初基礎模型,結(jié)合自身行業(yè)場景的手語數(shù)據(jù)做增量訓練,從而開發(fā)出手語多模態(tài)模型,并發(fā)布手語教考一體機創(chuàng)新產(chǎn)品,實現(xiàn)了跨越式發(fā)展。

在6月15-16日舉辦的華為伙伴暨開發(fā)者大會2022上,類似上述以大模型推動AI應用落地的案例正快速涌現(xiàn)。自去年以來,產(chǎn)業(yè)界基于昇騰AI先后推出鵬程.盤古、鵬程.神農(nóng)、紫東.太初、武漢.LuoJia、華為云盤古系列等有影響力的大模型,陸續(xù)孵化出多個行業(yè)解決方案,加速推動AI在生物醫(yī)藥、智慧城市、遙感、金融、農(nóng)業(yè)等眾多領域?qū)崿F(xiàn)落地應用,賦能千行百業(yè)智慧升級,掀起了以大模型產(chǎn)業(yè)化推動AI產(chǎn)業(yè)化的新浪潮。

2.jpg

而這一切得以發(fā)生,與華為著力打造的人工智能大模型全流程使能體系密切相關(guān)。大會期間,華為副總裁、計算產(chǎn)品線總裁鄧泰華正式發(fā)布并詳細解讀了華為的人工智能大模型全流程使能體系,該體系包含從大模型規(guī)劃、大模型開發(fā)到大模型產(chǎn)業(yè)化的全流程,可端到端加速大模型產(chǎn)業(yè)落地,為我們展示了一個以大模型產(chǎn)業(yè)化推動AI產(chǎn)業(yè)化的新范式。

規(guī)劃大模型沙盤 與產(chǎn)業(yè)界共筑中國大模型創(chuàng)新高地

從2020年開始,國外頂尖公司的AI技術(shù)發(fā)展,越來越像一場比拼資金與人才的軍備競賽,推動AI競爭從2018年前后興起的“大煉(小)模型”,進入到今天的“煉大模型”時代。大模型的優(yōu)勢不言而喻,但動則上百億的大參數(shù),也帶來了訓練成本太昂貴,模型修正不容易等難題,導致本來定位于“不再重復造輪子”的大模型,面臨重新陷入粗放式發(fā)展的境地。華為看到這一問題,積極聯(lián)合產(chǎn)業(yè)界規(guī)劃大模型沙盤,牽引產(chǎn)業(yè)界建設真正需要的大模型,共筑中國大模型創(chuàng)新高地。

3.jpg

從任務和應用類別兩個維度出發(fā),過去的一年,華為攜手產(chǎn)業(yè)界伙伴基于昇騰AI先后推出了各個領域有影響力的大模型,形成了基礎大模型+行業(yè)大模型的整體布局。基礎大模型面向多行業(yè)領域通用需求,行業(yè)大模型面向特定行業(yè)多應用場景,類似“新基建”中的信息基礎設施+融合基礎設施,形成既有橫向,也有縱深的立體支撐。

值得一提的是,考慮到“煉大模型”對大算力的強需求,華為與產(chǎn)業(yè)界在規(guī)劃大模型沙盤的同時,全國20多個城市也都規(guī)劃和建設了人工智能計算中心,并已開始將部分算力中心連點成片構(gòu)建中國算力網(wǎng)——智算網(wǎng)絡,以便基于它們的超強算力孵化AI大模型,大幅縮短大模型的訓練時間。鵬程、武漢、秦嶺、金陵系列大模型的快速推出,正得益于這一布局的強力支持。反過來,這些帶有一定地域特色的大模型,又能夠結(jié)合本地AI算力更好地服務產(chǎn)業(yè)。

據(jù)大會消息,為進一步鼓勵大模型的研究與創(chuàng)新,華為今年將推出昇騰科研創(chuàng)新使能計劃,通過資金、算力和技術(shù)的扶持,進一步鼓勵高校及科研院所基于昇騰大模型沙盤,開展大模型的研究和創(chuàng)新,在前沿領域和熱點行業(yè)打造出世界級領先的大模型。

打造大模型開發(fā)使能平臺 讓大模型易開發(fā)、易適配、易部署

方向既明,算力就緒之后,華為將重心放在了大模型的開發(fā)使能這塊技術(shù)“硬骨頭”上。大家可能知道,在華為的AI戰(zhàn)略布局中,Atlas系列硬件、異構(gòu)計算架構(gòu)CANN、全場景AI框架昇思MindSpore、昇騰應用使能MindX以及AI應用使能ModelArts等共同構(gòu)成了完善的昇騰AI基礎軟硬件平臺。依托長期的根技術(shù)積累,華為建立起了完整的大模型開發(fā)使能平臺,加速從基礎模型開發(fā)到推理部署的全流程,讓大模型易開發(fā)、易適配、易部署。

4.jpg

首先,在基礎模型開發(fā)方面,華為將昇思MindSpore與ModelArts結(jié)合,推出大模型開發(fā)套件,通過算法開發(fā)、并行計算、存儲優(yōu)化、斷點續(xù)訓重磅特性支撐大模型的高效開發(fā)。這其中,作為人工智能之“魂”,昇思MindSpore自誕生起就有著鮮明的產(chǎn)業(yè)導向,可以在云、邊、端等不同環(huán)境下進行開發(fā)部署,是并行維度業(yè)界最多、模型切分支持結(jié)構(gòu)最全、單機容納模型參數(shù)業(yè)界最強的的AI框架,這使其原生支持AI大模型訓練,具備實現(xiàn)開發(fā)并行代碼量降低80%、系統(tǒng)調(diào)整時間下降60%、僅用512卡就能完成十萬億模型參數(shù)訓練的超強能力。

其次,在行業(yè)應用適配方面,華為推出基于MindX的大模型微調(diào)組件,其預置典型行業(yè)任務微調(diào)模板,通過小樣本學習等手段,實現(xiàn)一鍵式微調(diào)和低參數(shù)調(diào)優(yōu),可以快速適配各種行業(yè)應用。

最后,在推理部署方面,推出基于MindStudio的大模型部署套件,其提供量化、剪枝、蒸餾等模型小型化能力,實現(xiàn)10倍級模型壓縮率,同時分布式推理服務化能力還大幅提高吞吐率,此外模型動態(tài)加密技術(shù),可在保證模型性能的同時對部署的模型進行加密,保護開發(fā)者的模型資產(chǎn)。

從科研創(chuàng)新到行業(yè)落地 開創(chuàng)人工智能產(chǎn)業(yè)聚集新模式

技術(shù)維度端到端打通后,大模型下一個最為關(guān)鍵的問題是產(chǎn)業(yè)化落地。當前學術(shù)界的大模型創(chuàng)新層出不窮,參數(shù)規(guī)模“競賽”很是熱鬧,但真正走到規(guī)?;a(chǎn)業(yè)部署的還寥寥無幾,后續(xù)的模型修正和迭代進化也進展緩慢,與此同時很多中小企業(yè)、科研單位受限于算力、數(shù)據(jù)、電力等高昂成本,無法自煉大模型,使得科研創(chuàng)新和產(chǎn)業(yè)應用存在斷點。

5.jpg

為了打通斷點,促進大模型產(chǎn)業(yè)化落地,華為充分發(fā)揮生態(tài)優(yōu)勢,圍繞大模型打通產(chǎn)學研用,建立大模型產(chǎn)業(yè)聯(lián)盟,促進產(chǎn)業(yè)伙伴直接基于大模型孵化行業(yè)應用,實現(xiàn)產(chǎn)業(yè)聚集,讓大模型真正賦能產(chǎn)業(yè)。去年底,基于全球首個智能遙感框架及數(shù)據(jù)集武漢.LuoJia和全球首個三模態(tài)大模型紫東.太初,產(chǎn)業(yè)各界成立了智能遙感開源生態(tài)聯(lián)盟和多模態(tài)人工智能產(chǎn)業(yè)聯(lián)盟,如今60余家伙伴已陸續(xù)孵化出多個行業(yè)解決方案。

除了開篇提及的千博信息基于紫東.太初的手語教考一體機創(chuàng)新外,長安汽車、新華社技術(shù)局、浙江移動、愛奇藝等多模態(tài)人工智能產(chǎn)業(yè)聯(lián)盟成員也分別打造了自己的多模態(tài)+智能座艙、多模態(tài)+新媒體內(nèi)容檢索平臺、多模態(tài)+南宋御街數(shù)字人、多模態(tài)+視頻摘要智能平臺等場景化大模型及行業(yè)應用。智能遙感開源生態(tài)聯(lián)盟下,基于武漢.LuoJia的自然資源大腦、全場景類腦遙感矩陣、耕地保護自然監(jiān)測平臺、智能遙感解譯平臺等創(chuàng)新成果也不斷涌現(xiàn)。

毋庸諱言,產(chǎn)業(yè)聯(lián)盟模式加速了大模型從科研創(chuàng)新到行業(yè)落地的進程,同時在這樣的大模型產(chǎn)業(yè)化落地過程中,各行業(yè)領域可以以更為豐富的數(shù)據(jù)和參數(shù)、更泛化的應用場景,來反哺大模型基礎能力,讓大模型更智能、場景適用性更好,從而迭代升級,為行業(yè)應用提供更大的支持,從而形成大模型創(chuàng)新--應用--迭代創(chuàng)新的產(chǎn)業(yè)正循環(huán),開啟了“煉大模型”的新范式!

據(jù)透露,華為今年將支撐伙伴成立AI流體力學、AI生物醫(yī)藥、智慧育種等產(chǎn)業(yè)聯(lián)盟,助力相關(guān)領域的大模型創(chuàng)新和產(chǎn)業(yè)化發(fā)展。

綜上,大模型是AI產(chǎn)業(yè)加快發(fā)展的必然,也是科研創(chuàng)新走向產(chǎn)業(yè)應用的關(guān)鍵。華為聯(lián)合產(chǎn)業(yè)界基于昇騰AI開啟的“煉大模型”新范式,首次從大模型規(guī)劃、開發(fā)到產(chǎn)業(yè)化構(gòu)建了大模型全流程使能體系,拉通了技術(shù)生態(tài)與商業(yè)生態(tài)之間的橋梁,必將加速我國大模型產(chǎn)業(yè)化發(fā)展,進而推動AI產(chǎn)業(yè)化和產(chǎn)業(yè)AI化,加速智能世界到來!


免責聲明:本網(wǎng)站內(nèi)容主要來自原創(chuàng)、合作伙伴供稿和第三方自媒體作者投稿,凡在本網(wǎng)站出現(xiàn)的信息,均僅供參考。本網(wǎng)站將盡力確保所提供信息的準確性及可靠性,但不保證有關(guān)資料的準確性及可靠性,讀者在使用前請進一步核實,并對任何自主決定的行為負責。本網(wǎng)站對有關(guān)資料所引致的錯誤、不確或遺漏,概不負任何法律責任。任何單位或個人認為本網(wǎng)站中的網(wǎng)頁或鏈接內(nèi)容可能涉嫌侵犯其知識產(chǎn)權(quán)或存在不實內(nèi)容時,應及時向本網(wǎng)站提出書面權(quán)利通知或不實情況說明,并提供身份證明、權(quán)屬證明及詳細侵權(quán)或不實情況證明。本網(wǎng)站在收到上述法律文件后,將會依法盡快聯(lián)系相關(guān)文章源頭核實,溝通刪除相關(guān)內(nèi)容或斷開相關(guān)鏈接。

2022-06-23
人工智能大模型落地難?昇騰AI三步走打通斷點
人工智能給社會帶來的改變,可能已經(jīng)超乎你的想象!

長按掃碼 閱讀全文