【TechWeb】9月25日消息, 2020云棲大會上,阿里云宣布對行業(yè)開源業(yè)界首個深度學習開放接口標準ODLA(Open Deep Learning API)。阿里云在今年5月份的OCP全球峰會上首次對外公布ODLA接口標準,并宣布已率先在Graphcore等生態(tài)伙伴上獲得支持。IPU是Graphcore為機器智能從零設(shè)計的AI處理器,通過ODLA接口,開發(fā)者可以在IPU上快速跑通AI Matrix的各類模型。
ODLA是一個為加速深度學習的統(tǒng)一異構(gòu)硬件編程接口。ODLA規(guī)范了深度學習計算任務(wù)的定義和執(zhí)行,實現(xiàn)上層應(yīng)用和底層異構(gòu)硬件平臺的解耦,讓AI異構(gòu)計算更簡單,實踐代碼“生成一次,隨時鏈接,隨處執(zhí)行”的愿景。
Graphcore的聯(lián)合創(chuàng)始人兼首席執(zhí)行官Nigel Toon表示:“ODLA優(yōu)雅地滿足了Graphcore新用戶的兩個最大需求。一是他們希望輕松地將我們的技術(shù)集成到現(xiàn)有的數(shù)據(jù)中心,二是他們希望確保最終的設(shè)置在從各個組件到整個系統(tǒng)的每個層級都能得到高度優(yōu)化。”
通過ODLA,在Graphcore IPU上技術(shù)適配和應(yīng)用部署的工作量可以實現(xiàn)大幅度降低,且實現(xiàn)效率大幅提升。另外,通過ODLA可以更好的與AI計算框架進行軟硬協(xié)同,快速利用現(xiàn)有的編譯優(yōu)化技術(shù),達到最佳性能。對于異構(gòu)任務(wù),ODLA充當該系統(tǒng)范圍通用語言與特定于架構(gòu)的優(yōu)化之間的接口或轉(zhuǎn)換器,該優(yōu)化可從Graphcore的IPU等設(shè)備實現(xiàn)最佳性能。
附 ODLA在2020云棲大會上宣布的主要特性:
?透明接口層,零損耗。
?接口抽象和統(tǒng)一,軟硬件解耦:通過面向AI的多粒度算子抽象,定義統(tǒng)一的接口,解耦具體軟硬件,平滑遷移業(yè)務(wù);實現(xiàn)代碼復用,提升開發(fā)和部署效率。
?多模態(tài)執(zhí)行方式:支持多種執(zhí)行模式,覆蓋解釋執(zhí)行、編譯執(zhí)行、載入預編譯代碼等場景,兼容各種硬件的運行模式。
?AI全場景支持:支持推理和訓練,適配云、邊、端全場景AI業(yè)務(wù);擁有廣泛的算子定義和豐富的接口(設(shè)備管理、會話管理、執(zhí)行管理、事件同步/異步、資源查詢、性能監(jiān)控等)。
?卓越的擴展性,支持AI芯片廠家獨特屬性和自定義算子。