Dex Semantics
Dex est un moteur d'analyse natif pour agents permettant d'explorer, de transformer et de maintenir les données d'entrepôt avec un accès en lecture seule, un contexte local et des contrôles de coûts.
Dex est un moteur d'analyse natif pour agents permettant d'explorer, de transformer et de maintenir les données d'entrepôt avec un accès en lecture seule, un contexte local et des contrôles de coûts.
Fonction du produit et positionnement officiel
Dex fonctionne comme une interface analytique pour les agents de codage IA, facilitant l'exploration des données, la construction de modèles et la maintenance continue du système. Il utilise une architecture en lecture seule pour profiler les sources de données, signaler les informations personnellement identifiables et mettre en cache les structures localement, de sorte que les données brutes et les identifiants restent séparés du contexte LLM.
Le système inclut des garde-fous conçus pour gérer la consommation des ressources en imposant des estimations par simulation pour le volume de scan de données avant l'exécution des opérations. Il fournit des outils pour définir des couches et des modèles sémantiques, tout en offrant des capacités de maintenance pour surveiller les changements de schéma, de grain et de sémantique au fil du temps.
Cas d’usage étayés par les sources officielles
Les agents IA utilisent des outils d'exploration pour profiler les colonnes, déduire les relations entre les tables et générer une carte provisoire de l'entrepôt de données.
Les développeurs utilisent le système pour générer des modèles SQL conscients des dépendances et des définitions de couches sémantiques compatibles avec des frameworks comme dbt et Cube.
Le parcours documenté, lorsqu’il est disponible
L'agent identifie et profile les sources de données pour construire une carte locale, signalant les données personnelles et déduisant les relations entre les tables.
L'agent génère des modèles et des définitions sémantiques basés sur des besoins spécifiques en données tout en validant par rapport aux cibles de développement.
Le système vérifie les snapshots de données établis pour détecter et proposer des corrections pour les dérives de schéma, de grain et de sémantique.
Le système est conçu pour interagir avec les entrepôts de données sans compromettre la sécurité sous-jacente des données brutes. En opérant avec une approche strictement en lecture seule, le moteur est conçu de manière à ce que les lignes brutes et les valeurs sensibles spécifiques ne soient pas copiées en dehors de l'environnement source.
La sécurité est maintenue en gardant les identifiants locaux à l'agent de l'utilisateur et en veillant à ce qu'ils ne soient jamais inclus dans la fenêtre de contexte envoyée au LLM. Seuls les résumés limités, les informations de schéma et les statistiques sont mis en cache localement pour faciliter la compréhension par l'agent.
Vérifications à effectuer avec vos contenus et votre flux de travail
Sources vérifiées et date de la vérification
Réponses fondées sur la fiche produit dont les sources ont été vérifiées
Dex se connecte à plusieurs entrepôts de données majeurs, notamment BigQuery, Snowflake, Databricks, Redshift, ClickHouse, PostgreSQL, Trino et DuckDB.
Dex fonctionne avec un accès en lecture seule, ne stockant localement que des résumés et agrégats limités, tout en maintenant les identifiants et les données brutes séparés des contextes LLM.
Oui, le module de maintenance détecte la dérive de schéma, de grain et sémantique en comparant les données actuelles aux snapshots de projet établis précédemment.
Dex impose des garde-fous de coûts en exigeant des estimations par simulation pour les scans de données avant d'autoriser l'agent à exécuter des requêtes ou des transformations.
Dex prend en charge la création pour dbt Semantic Layer, Apache Ossie, SLayer, Cube, Snowflake Semantic Views et Databricks Metric Views.