Qu’est-ce que Lakeflow Designer ?
Lakeflow Designer fournit un canevas visuel permettant aux analystes d’effectuer des opérations d’analytique, de préparation des données et d’automatisation de base. Dans Designer, vous créez des fichiers de préparation visuelle des données, chacun composé d’une séquence d’opérateurs (tels que le filtrage, la jointure et la transformation) agencés sous forme de graphe pour produire un résultat. Toutes les transformations sont prises en charge par du code, ce qui vous permet de versionner les fichiers dans Git et de planifier leur exécution en tant que jobs pour les déployer en production.
Avec Lakeflow Designer, vous pouvez :
- Concevez des workflows à l'aide d'un canevas glisser-déposer.
- Transformez les données sans écrire de code à l’aide d’opérateurs intégrés pour filtrer, agréger, joindre et remodeler les données.
- Utilisez Genie Code pour générer ou affiner les transformations dans votre préparation visuelle des données en utilisant le langage naturel.
- Prévisualisez chaque étape intermédiaire sans exécuter toute la préparation des données visuelles.
Pour créer votre première préparation de données visuelles, voir Tutoriel : Créer une préparation de données visuelles.
Visiter l'interface
L'éditeur Lakeflow Designer comporte les zones suivantes :
- Volet gauche : parcourir les opérateurs, trouver des opérateurs dans la table des matières, parcourir les fichiers Workspace et les données du catalogue, et définir les parameters.
- En-tête et barre d'outils : choisissez le compute, programmez la préparation des données visuelles, définissez des limites de prévisualisation et zoomez ou réorganisez automatiquement le canevas.
- Toile : ajoutez des opérateurs et connectez-les pour créer un workflow visuel.
- Panneau de configuration : Remplissez les détails de l'opérateur sélectionné. Il s'ouvre sur la droite.
- Volet de sortie : affichez et comparez les données d'entrée et de sortie de l'opérateur sélectionné. Il s'ouvre en bas.
- Prompt Genie Code : Décrivez les modifications en langage naturel.
Pour une visite guidée de chaque zone, voir L'interface de Lakeflow Designer.
Concepts clés
Préparation des données visuelles
Une préparation de données visuelles est un fichier Lakeflow Designer qui contient un workflow de données, des sources aux sorties en passant par des transformations. Voir Gérer les fichiers de préparation de données visuelles dans Lakeflow Designer.
Opérateurs
Les opérateurs sont les éléments constitutifs d’une préparation de données visuelles. Chaque opérateur exécute une action, telle qu’une jointure, un filtrage ou une écriture, que vous configurez pour vos données. Lakeflow Designer inclut des opérateurs intégrés pour les tâches courantes, et vous pouvez ajouter vos propres opérateurs définis par l’utilisateur.
Connexions
Les connexions Link les opérateurs et définissent la circulation des données entre eux, de gauche à droite. Voir Connecter les opérateurs.
Prévisualisations
Lakeflow Designer prévisualise chaque opérateur sur un échantillon de lignes afin que vous puissiez vérifier chaque étape sans exécuter l'ensemble de la préparation visuelle des données. Voir Prévisualiser et affiner les résultats dans Lakeflow Designer.
Code généré
Chaque préparation de données visuelles est soutenue par du code généré, vous pouvez donc versionner le code dans Git et le planifier en tant que job. Voir Déplacer un fichier de préparation de données visuelles vers la production.
Genie Code
Genie Code est l’assistant IA de Lakeflow Designer. Décrivez une transformation en langage naturel et Genie Code ajoute ou modifie les opérateurs pour vous. Voir Utiliser Genie Code dans Lakeflow Designer.