Découvrez les données
Databricks fournit une suite d'outils et de produits qui simplifient la découverte des assets de données accessibles via la Databricks Data Intelligence Platform. Cet article fournit une vue d'ensemble argumentée sur la façon dont vous pouvez découvrir et prévisualiser les données qui ont déjà été configurées pour l'accès dans votre workspace.
- Pour vous connecter aux sources de données, consultez Connexion aux sources de données et aux services externes.
- Pour en savoir plus sur l'accès aux données dans le Databricks Marketplace, consultez Qu'est-ce que Databricks Marketplace ?.
Les sujets de cette section portent sur l'exploration des objets de données et des fichiers de données. Si vous recherchez des informations sur l'utilisation d'assets tels que les notebooks, les queries SQL, les bibliothèques et les modèles, consultez l'interface utilisateur du Workspace.
Si vous recherchez des conseils concernant la génération de statistiques récapitulatives pour les datasets ou d'autres tâches associées à l'analyse exploratoire des données (EDA), consultez Analyse exploratoire des données sur Databricks : outils et techniques.
Comment pouvez-vous découvrir les assets de données ?
Les outils de découverte des données sur Databricks se répartissent dans les catégories générales suivantes :
- Insights assistés par l'IA, résumé et recherche.
- Recherche par mot-clé.
- Exploration du catalogue à l'aide de l'interface utilisateur.
- Listage et exploration des métadonnées par programmation.
Les outils de découverte des données sont optimisés pour les données régies par Unity Catalog. Les assets de données qui n'ont pas été enregistrés en tant qu'objets Unity Catalog pourraient ne pas être découvrables à l'aide de certaines de ces approches.
Trouver des données à l'aide de l'interface utilisateur
- Genie One : parcourez les assets partagés avec vous, recherchez par nom, posez des questions sur les données en langage naturel et filtrez par domaine. Voir Utiliser Genie One.
- Page Découvrir : une expérience de navigation organisée qui vous permet d’explorer les assets de données classés par domaines. Les conservateurs peuvent mettre en évidence les assets clés pour leur organisation, et les consommateurs peuvent naviguer par domaine ou par type d'asset. Consultez la page Découvrir, les domaines et les sous-domaines.
- **Explorateur de catalogues** : fournit des outils pour explorer et gouverner les assets de données. Accédez à l'Explorateur de
catalogues à l'aide de l'icône **Catalog** dans la barre latérale du Workspace. Utilisez l'onglet Insights pour savoir comment les données sont utilisées dans votre workspace. Voir Qu'est-ce que l'Explorateur de catalogues ? et Afficher les insight de table et la popularité.
- Notebooks et éditeur SQL : fournissent également un navigateur de catalogue pour explorer les objets de base de données. Cliquez sur l’icône Catalogue dans la barre latérale de l’éditeur pour développer ou réduire le navigateur de catalogue sans quitter votre éditeur de code.
Explorer les données par programmation
Vous pouvez utiliser la commande SHOW sur tous les objets de base de données pour découvrir les assets enregistrés dans Unity Catalog. Utilisez la commande LIST, la commande magique %fs ou les Utilities Databricks pour lister les fichiers.
Voir Explorer le stockage et rechercher des fichiers de données et Explorer les objets de base de données.
Examiner les commentaires sur les données
Vous pouvez consulter les commentaires pour en savoir plus sur le contenu des datasets disponibles dans votre lakehouse. Des commentaires peuvent être définis sur les objets de données, notamment les catalogues, schémas, tables et colonnes. Vous pouvez consulter les commentaires dans Catalog Explorer ou en utilisant la commande DESCRIBE pour un objet.
L'Explorateur de catalogues peut fournir des commentaires générés par l'IA pour les tables, ce qui facilite la tâche des propriétaires d'assets de données pour fournir un aperçu riche des datasets. Voir Ajouter des commentaires générés par l'IA aux objets Unity Catalog.
Les utilisateurs peuvent également, en option, ajouter des commentaires sur les tables et autres objets de base de données en utilisant le markdown, qui est rendu dans Catalog Explorer. Consultez Ajouter des commentaires aux assets de données et d'IA.
Rechercher des tables dans votre lakehouse
Vous pouvez utiliser la barre de recherche dans Databricks pour trouver les tables enregistrées dans Unity Catalog. Vous pouvez effectuer une recherche par mot-clé ou utiliser la recherche sémantique pour trouver des datasets ou des colonnes liés à votre query. La recherche ne renvoie des résultats que pour les tables pour lesquelles vous avez l'autorisation de voir. Rechercher les noms de tables d’examen, les noms de colonnes, les commentaires de table et les commentaires de colonne. Voir Rechercher des objets Workspace.