杭州2019年1月17日電 /美通社/ -- 2019年1月16日，才云 Caicloud 隆重推出 Caicloud Clever 的 1.3.0 版本，為用戶提供一站式、高效、易用的開發(fā)與交付體驗(yàn)。Caicloud Clever 是才云 Caicloud 基于自身云容器技術(shù)打造的人工智能云平臺(tái)，從硬件資源管理到模型高效開發(fā)，再到模型的自動(dòng)部署，它可以貫穿企業(yè) AI 應(yīng)用開發(fā)的整個(gè)過程。
現(xiàn)如今，人工智能在學(xué)術(shù)界和工業(yè)界屢現(xiàn)重大突破，而 Kubernetes 作為一個(gè)容器編排平臺(tái)，也在短短幾年間迎來了迅速崛起。在許多專家看來，它們的結(jié)合似乎可以為企業(yè)業(yè)務(wù)創(chuàng)新帶來無窮的可能性 -- 智慧城市、聯(lián)網(wǎng)汽車、智慧醫(yī)療……它們不僅能為企業(yè)提供利用技術(shù)搶占未來市場(chǎng)的機(jī)遇，也為整個(gè)社會(huì)接入智慧文明提供了初步嘗試。
但是，開發(fā)、部署機(jī)器學(xué)習(xí)產(chǎn)品也意味著大規(guī)模的復(fù)雜性，以下圖某 500 強(qiáng)企業(yè)的供應(yīng)鏈預(yù)測(cè)項(xiàng)目為例：
可以發(fā)現(xiàn)，模型訓(xùn)練代碼只是很小的一部分，企業(yè)在開發(fā)過程中還需對(duì)海量數(shù)據(jù)進(jìn)行預(yù)處理，對(duì)模型進(jìn)行持續(xù)評(píng)估，并進(jìn)行迭代更新。而除去復(fù)雜的開發(fā)環(huán)節(jié)，企業(yè)還要兼顧開發(fā)進(jìn)度監(jiān)控和最實(shí)際的落地部署，這些都對(duì)傳統(tǒng)操作系統(tǒng)提出了嚴(yán)峻挑戰(zhàn)。
事實(shí)上，這也是業(yè)界看好 Kubernetes 和 AI “聯(lián)姻”的原因。容器為流程運(yùn)行提供了緊湊的環(huán)境，它們易于擴(kuò)展，能在各種環(huán)境中移植 -- 從開發(fā)到測(cè)試再到生產(chǎn) -- 可以將大型完整應(yīng)用程序分解為有針對(duì)性、易于維護(hù)的微服務(wù)，完美契合 AI 應(yīng)用開發(fā)的各個(gè)階段。
針對(duì)以上背景，基于 Kubernetes 的人工智能云平臺(tái) Caicloud Clever 在新發(fā)布的 1.3.0 版本中做了大量?jī)?yōu)化，新增 AI DevOps 支持，致力于解決企業(yè) AI 模型開發(fā)、上線的諸多痛點(diǎn)。
亮點(diǎn)一：精準(zhǔn)化資源調(diào)度
AI 產(chǎn)品本質(zhì)上是由數(shù)據(jù)驅(qū)動(dòng)的，為了保證模型的準(zhǔn)確度和魯棒性，海量計(jì)算資源不可或缺。但鑒于計(jì)算資源成本高昂，企業(yè)也在迫切地尋找高效合理利用資源的有效解決方案。
得益于 Caicloud Compass 強(qiáng)大的資源管理能力（基于 Kubernetes 原生能力優(yōu)化），Caicloud Clever 可以自動(dòng)按需調(diào)度包括 GPU 在內(nèi)的計(jì)算資源，讓用戶可以在不關(guān)注物理資源的情況下托管訓(xùn)練任務(wù)、應(yīng)用服務(wù)等。它還支持基于 Workspace 的資源隔離，允許用戶針對(duì)不同項(xiàng)目、團(tuán)隊(duì)定制 Workspace 資源，按策略較大化資源利用率。
亮點(diǎn)二：模塊化開發(fā)集成
除了計(jì)算資源，AI 產(chǎn)品開發(fā)的挑戰(zhàn)還在于需要將許多不同的軟件庫(kù)集合在一起，也就是構(gòu)建完整的軟件生態(tài)系統(tǒng)。針對(duì)這方面的需求，Caicloud Clever 也做了大量?jī)?yōu)化，提供多種預(yù)定義任務(wù)模板，支持多語(yǔ)言多框架開發(fā)環(huán)境，大大降低了企業(yè)進(jìn)入門檻：
亮點(diǎn)三：版本化數(shù)據(jù)運(yùn)維
對(duì)于機(jī)器學(xué)習(xí)/深度學(xué)習(xí)模型的“糧食” -- 數(shù)據(jù)，Caicloud Clever 提供數(shù)據(jù)倉(cāng)庫(kù)、模型倉(cāng)庫(kù)等集裝式版本化數(shù)據(jù)管理，進(jìn)一步簡(jiǎn)化數(shù)據(jù)的調(diào)用、共享方式，讓數(shù)據(jù)能以更有效的方式在 AI 模塊中流動(dòng)。
在任務(wù)模塊，用戶可以通過點(diǎn)選把目標(biāo)數(shù)據(jù)集用于數(shù)據(jù)清洗或訓(xùn)練；在模型倉(cāng)庫(kù)中，各類模型可以按版本快速部署；在工程流中，Caicloud Clever 也提供按條件更新服務(wù)的支持。真正實(shí)現(xiàn)了 AI 流程中的各個(gè)模塊以數(shù)據(jù)相互連接。
亮點(diǎn)四：可視化訓(xùn)練管理
而為了方便算法科學(xué)家、服務(wù)運(yùn)維者、項(xiàng)目管理者等不同角色從不同角度審視任務(wù)表狀態(tài)，把控任務(wù)進(jìn)度。Caicloud Clever 支持可視化創(chuàng)建 TensorFlow、PyTorch 等框架的分布式多卡集群訓(xùn)練任務(wù)，支持實(shí)時(shí)訓(xùn)練日志及 GPU 等資源實(shí)時(shí)監(jiān)控。保障項(xiàng)目的順利進(jìn)行和按時(shí)完成，促進(jìn)團(tuán)隊(duì)合作。
亮點(diǎn)五：工程化 AI 全流程安排
考慮到 AI 產(chǎn)品開發(fā)涉及多個(gè)步驟，每個(gè)步驟所需的技能各異。Caicloud Clever 以工程流圖連接模塊、數(shù)據(jù)以及人，提高團(tuán)隊(duì)協(xié)作力及工程效率，加速工程化。
在 Caicloud Clever 平臺(tái)上，用戶可以創(chuàng)建從數(shù)據(jù)清洗、模型訓(xùn)練到模型服務(wù)等不同階段的任務(wù)模塊，涵蓋 AI 全流程。工程師、科學(xué)家可以在任務(wù)模塊上進(jìn)行開發(fā)，架構(gòu)師、項(xiàng)目經(jīng)理可自由編排 AI 模塊至工程流圖，快速將功能模塊拼接成工程項(xiàng)目。
亮點(diǎn)六：自動(dòng)化生產(chǎn)部署
此外，Caicloud Clever 也支持工程流圖一鍵式發(fā)布為生產(chǎn)流水線，所見即所得，無縫銜接 AI 工程開發(fā)與生產(chǎn)落地。用戶可基于工程流圖持續(xù)迭代開發(fā)，在不同迭代發(fā)布不同版本的流水線，流水線按條件觸發(fā)流圖流程，實(shí)現(xiàn) AI 工程實(shí)驗(yàn)到生產(chǎn)的自動(dòng)化部署。
把握創(chuàng)新機(jī)遇，敏態(tài)成就商機(jī)
隨著 AI 技術(shù)和云計(jì)算的蓬勃發(fā)展，Kubernetes 愈發(fā)呈現(xiàn)出向上支持高并發(fā)、數(shù)據(jù)類和 AI 類應(yīng)用業(yè)務(wù)的趨勢(shì) -- 越來越多公司正在把 Kubernetes 作為運(yùn)行其工作負(fù)載的平臺(tái)，而 AI 類業(yè)務(wù)正是一項(xiàng)日益重要的工作負(fù)載。
面對(duì)變化，尋找方向邁出第一步往往是最難的。AI 為企業(yè)提供了降低運(yùn)營(yíng)成本、改善決策和服務(wù)客戶的新形式，而像 Caicloud Clever 這樣基于 Kubernetes 的平臺(tái)，勢(shì)必會(huì)成為幫助企業(yè)采用 AI 和機(jī)器學(xué)習(xí)的首選協(xié)同平臺(tái)。所以，你選好你的第一步了嗎？
