Aller au contenu principal

Pipelines autonomes

Les Lakeflow pipelines sont la façon la plus courante de travailler avec des données dans des pipelines. Vous pouvez également définir des vues matérialisées et des tables de streaming autonomes en dehors d'un Lakeflow pipeline en utilisant une syntaxe de query simple, et Databricks gère les pipelines sous-jacents pour vous. Les tables autonomes peuvent être créées et actualisées depuis un Databricks SQL warehouse ou depuis un Notebook s'exécutant sur un compute général Serverless.

Pour choisir entre les tables autonomes et un LakeFlow Pipelines, consultez Pipelines autonomes ou LakeFlow Pipelines.

remarque

Cette section était précédemment appelée « Pipelines pour Databricks SQL ». Il a été renommé « pipelines autonomes » pour refléter le nouveau support pour la création de vues matérialisées autonomes et de tables de streaming à partir d'un Notebook exécuté sur un compute général serverless, en plus d'un warehouse Databricks SQL.

Cette section vous explique comment utiliser des pipelines autonomes, y compris les sujets suivants.

Sujet

Description

Exigences pour les pipelines autonomes

Découvrez les options de calcul pour les vues matérialisées autonomes et les tables de streaming, y compris le support des fonctionnalités et la disponibilité régionale.

Utiliser des tables de streaming autonomes

Créer, refresh, configurer et monitor des tables de streaming.

Utiliser des vues matérialisées autonomes

Créez, refresh et interrogez les vues matérialisées.

Sujet

Description

Exigences pour les pipelines autonomes

Découvrez les options de calcul pour les vues matérialisées autonomes et les tables de streaming, y compris le support des fonctionnalités et la disponibilité régionale.

Utiliser des tables de streaming autonomes

Créer, refresh, configurer et monitor des tables de streaming.

Utiliser des vues matérialisées autonomes

Créez, refresh et interrogez les vues matérialisées.

Pour créer et refresh des vues matérialisées autonomes et des tables de streaming avec Python depuis un Notebook, consultez Utiliser Python avec des pipelines autonomes.

Ressources supplémentaires