5月20日，由深度學(xué)習(xí)技術(shù)及應(yīng)用國家工程實(shí)驗(yàn)室與百度聯(lián)合主辦的WAVE SUMMIT 2021深度學(xué)習(xí)開發(fā)者峰會在北京召開。本屆峰會上，百度首次揭曉人工智能融合創(chuàng)新趨勢下的AI工業(yè)大生產(chǎn)實(shí)現(xiàn)路徑，飛槳帶來九大全新發(fā)布和全平臺升級。投入15億資金、聚焦生態(tài)發(fā)展的飛槳“大航海”計(jì)劃全面開啟。
峰會上，百度AI產(chǎn)品研發(fā)部總監(jiān)忻舟介紹了飛槳企業(yè)版“一核兩翼”AI開發(fā)雙平臺的全新升級，并宣布正式開放飛槳企業(yè)版的“核”——PaddleFlow，一個專為AI平臺開發(fā)者打造的易被集成的云原生機(jī)器學(xué)習(xí)核心系統(tǒng)。
百度AI產(chǎn)品研發(fā)部總監(jiān)忻舟介紹飛槳企業(yè)版
“ 兩翼 ” 升級， 飛槳企業(yè)版極致提升 AI 開發(fā)效率
2020年底，飛槳企業(yè)版首次提出了AI開發(fā)“雙平臺”模式。所謂“雙平臺”實(shí)際上由三個核心部分組成：左翼是為AI應(yīng)用開發(fā)者的EasyDL零門檻AI開發(fā)平臺;右翼是為AI算法開發(fā)者的BML全功能AI開發(fā)平臺;中間的核心是全新發(fā)布的為AI平臺開發(fā)者提供基礎(chǔ)設(shè)施的PaddleFlow。本次峰會上，飛槳企業(yè)版的“兩翼”迎來了全新的升級。
飛槳企業(yè)版AI雙平臺模式
“兩翼”中的EasyDL零門檻AI開發(fā)平臺面向AI應(yīng)用開發(fā)者，預(yù)置17種任務(wù)場景，通過端到端全流程的自動化建模與優(yōu)化機(jī)制，極致提升AI應(yīng)用開發(fā)效率。EasyDL還帶來了自動場景適配優(yōu)化、模型自動化評估與輔助診斷兩項(xiàng)新特性，不斷提升細(xì)分場景的模型效果和模型優(yōu)化迭代效率。
“兩翼”中的BML全功能AI開發(fā)平臺面向AI算法開發(fā)者，提供靈活全面的建模方式。預(yù)置模型開發(fā)是BML最具特色的功能之一，它是一種基于預(yù)訓(xùn)練的低代碼建模方式，集成了飛槳優(yōu)秀的開發(fā)套件和工具組件，結(jié)合產(chǎn)業(yè)最佳實(shí)踐，優(yōu)選出67套預(yù)置場景形成模型生產(chǎn)線，可節(jié)約80%左右的開發(fā)時間。本次預(yù)置模型開發(fā)新增支持了機(jī)器學(xué)習(xí)任務(wù)，并進(jìn)一步豐富了工具組件，以滿足更廣泛的AI開發(fā)場景需求。
PaddleFlow 發(fā)布， 首個專為 AI 平臺開發(fā)者 打造的 易被集成的云原生機(jī)器學(xué)習(xí)核心系統(tǒng)
隨著人工智能技術(shù)在產(chǎn)業(yè)應(yīng)用的深入，產(chǎn)生了廣泛的AI開發(fā)場景，并對平臺提出了更加多樣化的需求，需要深入場景和行業(yè)結(jié)合的垂直行業(yè)應(yīng)用AI平臺;需要與業(yè)務(wù)緊密結(jié)合、自主可控的AI開發(fā)平臺;對大量應(yīng)用容器的開發(fā)者，則希望容器具備AI能力，能夠訓(xùn)練和部署AI模型。
基于此，飛槳企業(yè)版中的核心——PaddleFlow全新開放。PaddleFlow是首個專為AI平臺開發(fā)者打造的易被集成的云原生機(jī)器學(xué)習(xí)核心系統(tǒng)，具備云原生、高性能、輕量易用的產(chǎn)業(yè)特色，為AI平臺開發(fā)者提供資源管理調(diào)度等核心能力，賦能更多細(xì)分場景和深度定制的AI平臺。
全新開放云原生機(jī)器學(xué)習(xí)核心PaddleFlow
PaddleFlow架構(gòu)主要包括三層，為開發(fā)者提供了資源調(diào)度、作業(yè)執(zhí)行與服務(wù)部署等AI開發(fā)平臺核心能力，以及友好的開發(fā)接口。在資源調(diào)度層，PaddleFlow提供了AI平臺運(yùn)行所需的存儲和計(jì)算資源的統(tǒng)一接入和調(diào)度，支持高性能的AI異構(gòu)計(jì)算資源管理，并提供靈活豐富的資源調(diào)度策略，包括拓?fù)涓兄?、超發(fā)搶占、GPU虛擬化等;支持常見的各種存儲系統(tǒng)的統(tǒng)一對接，還提供了高性能存儲中間件來加速AI計(jì)算時數(shù)據(jù)訪問的效率。在作業(yè)執(zhí)行和服務(wù)部署層，提供了AI平臺核心關(guān)鍵能力，從作業(yè)調(diào)度、工作流調(diào)度，到模型的管理以及預(yù)測服務(wù)的管理，并支持包括飛槳在內(nèi)的深度學(xué)習(xí)框架以及算法庫，以及常見的Spark、MPI等計(jì)算類型和主流的機(jī)器學(xué)習(xí)和深度學(xué)習(xí)框架。在用戶接入層，提供了易被集成的REST API、命令行客戶端等多種形式，還提供了多租戶和基本的認(rèn)證授權(quán)機(jī)制，另外對平臺管理員支持簡單的管理操作，包括任務(wù)查看、資源管控等。
PaddleFlow架構(gòu)
PaddleFlow源自于產(chǎn)業(yè)實(shí)踐，具備非常鮮明的產(chǎn)業(yè)特色。PaddleFlow性能優(yōu)異，支持?jǐn)?shù)萬算力卡調(diào)度、數(shù)千并發(fā)作業(yè)數(shù)的大規(guī)模并行訓(xùn)練。同時，PaddleFlow也非常輕量和易于應(yīng)用，可以實(shí)現(xiàn)一鍵部署安裝。針對市場上大多數(shù)實(shí)際應(yīng)用條件是單機(jī)的情況，PaddleFlow還對單機(jī)部署做了特別多的優(yōu)化。
PaddleFlow已在眾多場景成功應(yīng)用，在遙感領(lǐng)域，中科北緯基于云原生集群和PaddleFlow方案，構(gòu)建了緊密結(jié)合業(yè)務(wù)場景的遙感智能視覺平臺，使得業(yè)務(wù)模型具備可重訓(xùn)能力，滿足環(huán)境監(jiān)測、農(nóng)業(yè)監(jiān)測、資源普查等需求，有效輔助客戶做出決策。同時，深度應(yīng)用AI技術(shù)的企業(yè)也可以在PaddleFlow基礎(chǔ)上，定制開發(fā)自有的深度學(xué)習(xí)平臺。PaddleFlow也將與百度智能云容器服務(wù)結(jié)合，為開發(fā)者提供AI原生的容器服務(wù)。
目前，PaddleFlow已經(jīng)開放合作，邀請廣大開發(fā)者和合作伙伴試用，并將逐步推進(jìn)開放和開源，賦能更多AI平臺開發(fā)者。
自飛槳企業(yè)版發(fā)布以來，已有越來越多的開發(fā)者和行業(yè)企業(yè)用戶將其作為他們實(shí)現(xiàn)業(yè)務(wù)創(chuàng)新和智能化升級的首選AI開發(fā)平臺。隨著雙平臺的不斷升級，以及PaddleFlow的發(fā)布，未來飛槳企業(yè)版將不斷升級平臺功能與服務(wù)質(zhì)量，創(chuàng)新AI開發(fā)產(chǎn)品體驗(yàn)，不斷降低技術(shù)應(yīng)用門檻，加速AI大生產(chǎn)，推動產(chǎn)業(yè)智能化進(jìn)程。
