谷歌云平臺(GCP)最近宣布了云A I平臺管道的測試版推出,這是一種用于自動(dòng)化和管理機(jī)器學(xué)習(xí)(M L)工作流的新產(chǎn)品,它利用了開源技術(shù)TensorFlow擴(kuò)展(T FX)和Kubeflow管道(K FP)。
在最近的一篇博客文章中,產(chǎn)品經(jīng)理AnushaRamesh和開發(fā)人員倡導(dǎo)者AmyUnruh概述了產(chǎn)品的提供及其功能。 云A I平臺管道解決了管理端到端ML工作流的問題,該工作流跨越了從接收原始數(shù)據(jù)到模型訓(xùn)練和評估,到在生產(chǎn)中服務(wù)模型推理的生命周期。 新產(chǎn)品包含用于構(gòu)建工作流、跟蹤工作流工件和譜系的工具,以及與其他GCP服務(wù)(如BigQuery和Dataflow)集成的“企業(yè)準(zhǔn)備”工作流執(zhí)行基礎(chǔ)設(shè)施。 據(jù)Ramesh和Unruh說,
云A I平臺管道提供了一種方法來部署健壯的、可重復(fù)的機(jī)器學(xué)習(xí)管道以及監(jiān)視、審計(jì)、版本跟蹤和可重現(xiàn)性,并為您的ML工作流提供了一個(gè)企業(yè)準(zhǔn)備、易于安裝、安全的執(zhí)行環(huán)境。
云A I平臺管道是在GoogleKubernetesEngine(GKE)集群上運(yùn)行的TensorFlow擴(kuò)展(T FX)和Kubeflow管道(K FP)的托管實(shí)現(xiàn)。 TFX是一個(gè)抽象層,其中核心概念是一個(gè)管道,一系列必須協(xié)調(diào)或編排的數(shù)據(jù)轉(zhuǎn)換步驟(管道組件);在組件之間傳輸?shù)臄?shù)據(jù)稱為工件。 KFP是協(xié)調(diào)器,它在GKE集群中的一個(gè)吊艙上執(zhí)行管道中的每個(gè)組件。 TFX還定義了ML元數(shù)據(jù)(MLMD)的數(shù)據(jù)存儲(chǔ),該數(shù)據(jù)存儲(chǔ)允許跟蹤管道的歷史和版本以及管道產(chǎn)生的工件。 云A I平臺管道支持兩個(gè)SDK,TFX高級SDK和低級KFPSD K;然而,谷歌計(jì)劃將兩者合并為一個(gè)TFXSDK。