通過(guò)WAIC開(kāi)發(fā)者2020上海臨港人工智能開(kāi)發(fā)者大會(huì)，讓我們走近MindSpore，了解AI框架與數(shù)據(jù)開(kāi)源生態(tài)。
2020年，國(guó)產(chǎn)深度學(xué)習(xí)框架似乎迎來(lái)了開(kāi)源史上的高光時(shí)刻。既然提到國(guó)產(chǎn)框架，就一定會(huì)有華為MindSpore的身影。今年3月華為MindSpore正式開(kāi)源，受到學(xué)界和業(yè)界的廣泛關(guān)注，至今已經(jīng)獲得近5萬(wàn)名開(kāi)發(fā)者下載使用，累計(jì)PR數(shù)超過(guò)1萬(wàn)。
作為國(guó)產(chǎn)開(kāi)源框架的代表作，MindSpore有三大創(chuàng)新：全流程極簡(jiǎn)，多套件打造極致開(kāi)發(fā)體驗(yàn)；全自動(dòng)并行，最大釋放集群算力；全場(chǎng)景協(xié)同全場(chǎng)景協(xié)同，智能匹配端、邊、云多樣設(shè)備。MindSpore還有哪些更多特性？如何助力行業(yè)落地應(yīng)用。
在12月26日WAIC開(kāi)發(fā)者2020上海臨港人工智能開(kāi)發(fā)者大會(huì)的「華為AI專(zhuān)場(chǎng)AI框架與數(shù)據(jù)開(kāi)源生態(tài)」上，來(lái)自華為及合作伙伴的多位技術(shù)專(zhuān)家?guī)ьI(lǐng)我們真正走近了MindSpore。
華為計(jì)算開(kāi)源開(kāi)發(fā)與運(yùn)營(yíng)部副總監(jiān)黃之鋒首先回顧了MindSpore開(kāi)源這一年中的運(yùn)營(yíng)情況，介紹了MindSpore的運(yùn)營(yíng)原則和舉辦的一系列開(kāi)發(fā)者活動(dòng)，如12天12城的MindCon極客周、21天深度學(xué)習(xí)實(shí)戰(zhàn)營(yíng)等。
黃之鵬表示，開(kāi)源運(yùn)營(yíng)最重要的是建立人與人之間尤其是有關(guān)技術(shù)的連接。我們希望開(kāi)源社區(qū)運(yùn)營(yíng)是要有煙火味的，必須要接地氣的，我們希望用非常接地氣的方法跟大家交流。
隨后，上海交通大學(xué)副教授、博士導(dǎo)師蔣力帶來(lái)了一個(gè)芯片體系架構(gòu)方面的有趣議題：何時(shí)進(jìn)入千倍能效優(yōu)勢(shì)的AI芯片熱兵器時(shí)代。他在演講中介紹了AI芯片的發(fā)展趨勢(shì)和挑戰(zhàn)、稀疏性問(wèn)題、存算一體新型架構(gòu)的進(jìn)展與挑戰(zhàn)，以及與MindSpore合作解決稀疏性問(wèn)題的嘗試。
蔣力教授表示，芯片是否成功主要取決于它的生態(tài)是否好。框架對(duì)于AI的算法和硬件架構(gòu)的協(xié)同設(shè)計(jì)是至關(guān)重要的。未來(lái)的趨勢(shì)是協(xié)同優(yōu)化應(yīng)該交給框架去做，讓框架把算法中的精度問(wèn)題、計(jì)算性能、延遲等問(wèn)題，甚至一些新的工藝、工具鏈需要解決的問(wèn)題融合在一起。未來(lái)我們從工藝到EDA工具等等這些「卡脖子」的問(wèn)題是非常有希望在存算一體這種新的賽道上，在這一新賽道上是可以構(gòu)建出一套國(guó)產(chǎn)自主的從芯片設(shè)計(jì)到編譯框架、軟件框架整個(gè)生態(tài)的鏈條。
MindSpore在應(yīng)用層面效果如何呢？Jina AI聯(lián)合創(chuàng)始人兼首席技術(shù)官王楠介紹了如何利用神經(jīng)搜索框架Jina 和深度學(xué)習(xí)框架MindSpore快速搭建向量搜索系統(tǒng)。
他首先用以圖搜圖的案例來(lái)介紹向量搜索，即通過(guò)深度學(xué)習(xí)模型將圖片轉(zhuǎn)化為向量，再把這些向量存儲(chǔ)一個(gè)向量索引中，當(dāng)用戶拿一張圖片來(lái)做查詢的時(shí)候，我們會(huì)把這張圖片也通過(guò)深度學(xué)習(xí)的模型轉(zhuǎn)化為向量，然后在這個(gè)向量索引中，和我們之前存儲(chǔ)的那些向量進(jìn)行對(duì)比，從而找出最相似的圖片。然而，要在實(shí)際的生產(chǎn)系統(tǒng)中搭建這樣的向量系統(tǒng)，需要非常高的開(kāi)發(fā)和維護(hù)成本，Jina針對(duì)這一痛點(diǎn)開(kāi)發(fā)出一套開(kāi)源的搜索框架，這是一個(gè)云原生的搜索框架，具備可縮放性。而將Jina與MindSpore框架相融合，有助于打造一個(gè)更厲害更強(qiáng)大的向量搜索系統(tǒng)。
Zilliz合伙人、技術(shù)布道師顧鈞也介紹了MindSpore在其業(yè)務(wù)中的應(yīng)用，其演講主題是如何利用Milvus和MindSpore做模型服務(wù)和數(shù)據(jù)服務(wù)，讓AI程序在生產(chǎn)系統(tǒng)中真正地跑起來(lái)。他介紹了旨在解決非結(jié)構(gòu)數(shù)據(jù)搜索問(wèn)題的Milvus項(xiàng)目，以及如何通過(guò)模型服務(wù)和數(shù)據(jù)服務(wù)簡(jiǎn)化AI落地。目前Milvus已經(jīng)開(kāi)源。
在這次論壇的最后，MindSpore高級(jí)工程師與社區(qū)布道師吳丹萍介紹了MindSpore的關(guān)鍵差異化特征和應(yīng)用案例。
MindSpore的關(guān)鍵特性包括：
自動(dòng)并行，實(shí)現(xiàn)大規(guī)模高效訓(xùn)練；
動(dòng)靜態(tài)圖結(jié)合；
二階優(yōu)化，實(shí)現(xiàn)訓(xùn)練加速20%；
可視化調(diào)優(yōu)，打造最佳開(kāi)發(fā)體驗(yàn)；
全場(chǎng)景協(xié)同：智能匹配端、邊、云多樣設(shè)備；
全棧協(xié)同加速。
演講最后，吳丹萍介紹了MindSpore與鵬城實(shí)驗(yàn)室、深圳灣實(shí)驗(yàn)室、銀行、教育部等的合作。
