Dex Semantics
Dexは、読み取り専用アクセス、ローカルコンテキスト、およびスキャンコスト管理を備え、データウェアハウス分析の探索、変換、保守を行うエージェントネイティブな分析エンジンです。
Dexは、読み取り専用アクセス、ローカルコンテキスト、およびスキャンコスト管理を備え、データウェアハウス分析の探索、変換、保守を行うエージェントネイティブな分析エンジンです。
製品の機能と公式な位置づけ
DexはAIコーディングエージェント向けの分析インターフェースとして機能し、データ探索、モデル構築、継続的なシステム保守を促進します。読み取り専用アーキテクチャを採用してデータソースをプロファイリングし、個人を特定できる情報(PII)にフラグを立て、構造をローカルにキャッシュすることで、元データと認証情報がLLMコンテキストから分離された状態を維持します。
本システムには、操作の実行前にデータスキャン量のドライラン見積もりを義務付けることでリソース消費を管理するガードレールが含まれています。セマンティックレイヤーやモデルを定義するためのツールを提供するほか、時間の経過に伴うスキーマ、粒度、セマンティックの変更を監視する保守機能も備えています。
公式情報で確認できる活用例
AIエージェントが探索ツールを活用して列をプロファイリングし、テーブル関係を推論して、データウェアハウスのドラフトマップを生成します。
開発者は本システムを使用して、dbtやCubeなどのフレームワークと互換性のある、依存関係を認識したSQLモデルおよびセマンティックレイヤー定義を生成します。
公式情報に記載された利用手順
エージェントがデータソースを特定およびプロファイリングしてローカルマップを構築し、PIIのフラグ付けとテーブル関係の推論を行います。
エージェントは特定のデータ要件に基づいてモデルとセマンティック定義を生成し、開発ターゲットに対して検証を実施します。
システムが確立されたデータスナップショットをチェックし、スキーマ、粒度、およびセマンティックドリフトを検知して修正案を提示します。
本システムは、元データの基盤となるセキュリティを損なうことなくデータウェアハウスと連携するように設計されています。厳格な読み取り専用アプローチで動作することにより、元データの行や特定の機密性の高い値がソース環境の外部にコピーされないよう設計されています。
認証情報をユーザーのエージェントのローカルに保持し、LLMに送信されるコンテキストウィンドウに含めないようにすることでセキュリティが維持されます。エージェントによる理解を促進するために、制限された要約、スキーマ情報、および統計情報のみがローカルにキャッシュされます。
自分の素材とワークフローで確認したい項目
確認した情報源とその日時
情報源を確認した製品情報に基づく回答
Dexは、BigQuery、Snowflake、Databricks、Redshift、ClickHouse、PostgreSQL、Trino、DuckDBなど、複数の主要なデータウェアハウスへの接続をサポートしています。
Dexは読み取り専用アクセスで動作し、制限された要約と集計のみをローカルに保存しながら、認証情報と生データをLLMのコンテキストから完全に分離して保持します。
はい。保守モジュールが現在のデータを以前に確立されたプロジェクトのスナップショットと比較することで、スキーマ、粒度、およびセマンティックドリフトを検出します。
Dexは、エージェントがクエリや変換を実行できるようにする前にデータスキャン量のドライラン見積もりを義務付けることで、コストガードレールを適用します。
Dexは、dbt Semantic Layer、Apache Ossie、SLayer、Cube、Snowflake Semantic Views、Databricks Metric Viewsの作成をサポートしています。