Orchestrazione delle pipeline TFX

Pipeline Kubeflow

Kubeflow è una piattaforma ML open source dedicata a rendere le distribuzioni di flussi di lavoro di machine learning (ML) su Kubernetes semplici, portatili e scalabili. Kubeflow Pipelines fa parte della piattaforma Kubeflow che consente la composizione e l'esecuzione di flussi di lavoro riproducibili su Kubeflow, integrati con sperimentazioni ed esperienze basate su notebook. I servizi Kubeflow Pipelines su Kubernetes includono l'archivio metadati ospitato, il motore di orchestrazione basato su contenitori, il server notebook e l'interfaccia utente per aiutare gli utenti a sviluppare, eseguire e gestire pipeline ML complesse su larga scala. Kubeflow Pipelines SDK consente la creazione e la condivisione di componenti, composizioni e pipeline a livello di codice.

Consulta l' esempio di TFX su Kubeflow Pipelines per i dettagli sull'esecuzione di TFX su larga scala su Google Cloud.