7月7日,在華為開(kāi)發(fā)者大會(huì) 2023 上,華為云盤(pán)古大模型3.0正式亮相。
(資料圖片)
華為常務(wù)董事、華為云CEO張平安介紹道,華為云盤(pán)古大模型3.0是一個(gè)完全面向行業(yè)的大模型系列,包括“5+N+X”三層架構(gòu):L0層的基礎(chǔ)大模型、L1層行業(yè)大模型以及L2層場(chǎng)景模型。
L0層包括自然語(yǔ)言、視覺(jué)、多模態(tài)、預(yù)測(cè)、科學(xué)計(jì)算五個(gè)基礎(chǔ)大模型,提供滿足行業(yè)場(chǎng)景中的多種技能需求。盤(pán)古3.0為客戶提供100億參數(shù)、380億參數(shù)、710參數(shù)和1000億參數(shù)的系列化基礎(chǔ)大模型,匹配客戶不同場(chǎng)景、不同時(shí)延、不同響應(yīng)速度的行業(yè)多樣化需求。同時(shí)提供全新能力集,包括NLP大模型的知識(shí)問(wèn)答、文案生成、代碼生成,以及多模態(tài)大模型的圖像生成、圖像理解等能力,這些技能都可以供客戶和伙伴企業(yè)直接調(diào)用。無(wú)論多大參數(shù)規(guī)模的大模型,盤(pán)古提供一致的能力集。
L1層是N個(gè)行業(yè)大模型,華為云既可以提供使用行業(yè)公開(kāi)數(shù)據(jù)訓(xùn)練的行業(yè)通用大模型,包括政務(wù),金融,制造,礦山,氣象等大模型;也可以基于行業(yè)客戶的自有數(shù)據(jù),在盤(pán)古大模型的L0和L1層上,為客戶訓(xùn)練自己的專(zhuān)有大模型。
L2層為客戶提供了更多細(xì)化場(chǎng)景的模型,更加專(zhuān)注于政務(wù)熱線、網(wǎng)點(diǎn)助手、先導(dǎo)藥物篩選、傳送帶異物檢測(cè)、臺(tái)風(fēng)路徑預(yù)測(cè)等具體行業(yè)應(yīng)用或特定業(yè)務(wù)場(chǎng)景,為客戶提供“開(kāi)箱即用”的模型服務(wù)。
來(lái)源:現(xiàn)場(chǎng)圖片
張平安表示盤(pán)古大模型3.0“不做詩(shī)只做事”,將圍繞“行業(yè)重塑”“技術(shù)扎根”“開(kāi)放同飛”三大創(chuàng)新方向,為行業(yè)客戶、伙伴及開(kāi)發(fā)者提供更好的服務(wù)。據(jù)介紹,盤(pán)古大模型已在金融、制造、醫(yī)藥研發(fā)、煤礦、鐵路、氣象等諸多行業(yè)發(fā)揮巨大價(jià)值。
在政務(wù)領(lǐng)域,華為云攜手深圳市福田區(qū)政務(wù)服務(wù)數(shù)據(jù)管理局,上線了基于盤(pán)古政務(wù)大模型的福田政務(wù)智慧助手小福,能夠精準(zhǔn)理解民眾咨詢意圖,改變傳統(tǒng)的一網(wǎng)通辦模式,把老百姓的話語(yǔ)轉(zhuǎn)化為政府辦事的語(yǔ)言。盤(pán)古政務(wù)大模型對(duì)超過(guò)20萬(wàn)條政務(wù)數(shù)據(jù)進(jìn)行精調(diào),包括12345熱線、政策文件、政務(wù)百科等,掌握了豐富的法律法規(guī)、辦事流程等行業(yè)知識(shí)?;诒P(pán)古政務(wù)大模型的小福,在一網(wǎng)通辦業(yè)務(wù)中體現(xiàn)出行業(yè)性、專(zhuān)業(yè)性、領(lǐng)先性和惠民性。
在煤礦領(lǐng)域,盤(pán)古礦山大模型已經(jīng)在全國(guó)8個(gè)礦井規(guī)模使用,一個(gè)大模型可以覆蓋煤礦的采、掘、機(jī)、運(yùn)、通、洗選等業(yè)務(wù)流程下的1000多個(gè)細(xì)分場(chǎng)景,讓更多的煤礦工人能夠在地面上作業(yè),不僅能讓煤礦工人的工作環(huán)境更加舒適,而且可以極大地減少安全事故。
據(jù)公開(kāi)資料,華為盤(pán)古系列基礎(chǔ)大模型于2021發(fā)布,包括NLP、CV和科學(xué)計(jì)算大模三大基礎(chǔ)大模型,后續(xù)發(fā)布了礦山、藥物分子、氣象、海浪等行業(yè)大模型;2022年4月升級(jí)到2.0版本,發(fā)布層次化開(kāi)發(fā)方案 ( LO, L1,L2) ,打造工業(yè)級(jí)盤(pán)古大模型。
據(jù)了解,基于華為的AI根技術(shù),大模型訓(xùn)練效能可以調(diào)優(yōu)到業(yè)界主流GPU的1.1倍。華為在最底層構(gòu)建了以鯤鵬和昇騰為基礎(chǔ)的AI算力云平臺(tái),以及異構(gòu)計(jì)算架構(gòu)CANN、全場(chǎng)景AI框架昇思MindSpore,AI開(kāi)發(fā)生產(chǎn)線ModelArts等,為大模型開(kāi)發(fā)和運(yùn)行提供分布式并行加速,算子和編譯優(yōu)化、集群級(jí)通信優(yōu)化等關(guān)鍵能力。
眾所周知算力是訓(xùn)練大模型的基礎(chǔ)。在本次大會(huì)上,張平安宣布單集群2000PFlops算力的昇騰AI云服務(wù)在華為云的烏蘭察布和貴安AI算力中心同時(shí)上線。昇騰AI云服務(wù)除了支持華為全場(chǎng)景AI框架昇思MindSpore外,還支持Pytorch、Tensorflow等主流AI框架。同時(shí),這些框架中90%的算子,都可以通過(guò)華為端到端的遷移工具平滑遷移到昇騰平臺(tái)。
本文源自:AI星球
關(guān)鍵詞:
版權(quán)與免責(zé)聲明:
1 本網(wǎng)注明“來(lái)源:×××”(非商業(yè)周刊網(wǎng))的作品,均轉(zhuǎn)載自其它媒體,轉(zhuǎn)載目的在于傳遞更多信息,并不代表本網(wǎng)贊同其觀點(diǎn)和對(duì)其真實(shí)性負(fù)責(zé),本網(wǎng)不承擔(dān)此類(lèi)稿件侵權(quán)行為的連帶責(zé)任。
2 在本網(wǎng)的新聞頁(yè)面或BBS上進(jìn)行跟帖或發(fā)表言論者,文責(zé)自負(fù)。
3 相關(guān)信息并未經(jīng)過(guò)本網(wǎng)站證實(shí),不對(duì)您構(gòu)成任何投資建議,據(jù)此操作,風(fēng)險(xiǎn)自擔(dān)。
4 如涉及作品內(nèi)容、版權(quán)等其它問(wèn)題,請(qǐng)?jiān)?0日內(nèi)同本網(wǎng)聯(lián)系。