Dex Semantics
Dex는 읽기 전용 액세스, 로컬 컨텍스트 및 스캔 비용 제어를 통해 데이터 웨어하우스 분석을 탐색, 변환 및 유지 관리하기 위한 에이전트 네이티브 분석 엔진입니다.
Dex는 읽기 전용 액세스, 로컬 컨텍스트 및 스캔 비용 제어를 통해 데이터 웨어하우스 분석을 탐색, 변환 및 유지 관리하기 위한 에이전트 네이티브 분석 엔진입니다.
제품의 기능과 공식 포지셔닝
Dex는 AI 코딩 에이전트를 위한 분석 인터페이스로 기능하며, 데이터 탐색, 모델 구성 및 지속적인 시스템 유지 관리를 원활하게 지원합니다. 읽기 전용 아키텍처를 활용하여 데이터 소스를 프로파일링하고, 개인 식별 정보를 플래깅하며, 구조를 로컬에 캐싱함으로써 원시 데이터와 자격 증명이 LLM 컨텍스트와 분리되도록 합니다.
이 시스템에는 작업 실행 전 데이터 스캔 볼륨에 대한 드라이런 예측을 강제하여 리소스 소비를 관리하도록 설계된 가드레일이 포함되어 있습니다. 또한 시맨틱 레이어와 모델을 정의하기 위한 도구를 제공하며, 시간이 지남에 따라 스키마, 그레인 및 시맨틱 변경 사항을 모니터링하는 유지 관리 기능을 제공합니다.
공식 출처로 확인된 활용 사례
AI 에이전트는 탐색 도구를 사용하여 컬럼을 프로파일링하고 테이블 관계를 추론하며 데이터 웨어하우스의 초안 맵을 생성합니다.
개발자는 이 시스템을 사용하여 dbt 및 Cube와 같은 프레임워크와 호환되는 의존성 인지 SQL 모델과 시맨틱 레이어 정의를 생성합니다.
공식 문서에 안내된 사용 절차
에이전트는 데이터 소스를 식별하고 프로파일링하여 로컬 맵을 구축하고, 개인 식별 정보(PII)를 플래깅하며 테이블 관계를 추론합니다.
에이전트는 특정 데이터 요구 사항에 따라 모델 및 시맨틱 정의를 생성하면서 개발 타겟에 대해 유효성을 검사합니다.
시스템은 설정된 데이터 스냅샷을 확인하여 스키마, 그레인 및 시맨틱 드리프트를 감지하고 수정 사항을 제안합니다.
이 시스템은 원시 데이터의 근본적인 보안을 저해하지 않으면서 데이터 웨어하우스와 상호 작용하도록 설계되었습니다. 엄격한 읽기 전용 접근 방식을 운영함으로써, 원시 행과 특정 민감한 값은 소스 환경 외부로 복사되지 않도록 설계되었습니다.
자격 증명을 사용자 에이전트의 로컬에 유지하여 LLM으로 전송되는 컨텍스트 창에 포함되지 않도록 함으로써 보안이 유지됩니다. 에이전트의 이해를 돕기 위해 제한된 요약, 스키마 정보 및 통계만 로컬에 캐시됩니다.
본인의 자료와 작업 흐름으로 직접 확인할 항목
확인한 출처와 확인 시점
출처를 확인한 제품 정보를 바탕으로 한 답변
Dex는 BigQuery, Snowflake, Databricks, Redshift, ClickHouse, PostgreSQL, Trino 및 DuckDB를 포함한 여러 주요 데이터 웨어하우스에 연결됩니다.
Dex는 읽기 전용으로 작동하며, 제한된 요약과 집계 데이터만 로컬에 저장하고, 자격 증명과 원시 데이터는 LLM 컨텍스트와 완전히 분리하여 안전하게 유지합니다.
네, 유지 관리 모듈은 현재 데이터와 이전에 설정된 프로젝트 스냅샷을 비교하여 스키마, 그레인 및 시맨틱 드리프트를 감지합니다.
Dex는 에이전트가 쿼리나 변환을 실행하기 전에 데이터 스캔에 대한 드라이런(dry-run) 예측을 요구함으로써 비용 가드레일을 시행합니다.
Dex는 dbt 시맨틱 레이어, Apache Ossie, SLayer, Cube, Snowflake 시맨틱 뷰 및 Databricks 메트릭 뷰에 대한 작성을 지원합니다.