데이터브릭스, 유니티 카탈로그 기반 데이터 검색 및 도메인 기능 공개

주장데이터브릭스는 기업 내 데이터와 인공지능 자산이 급증함에 따라 발생하는 검색 및 신뢰성 문제를 해결하고자 디스커버와 도메인 기능을 출시했습니다. 이 기능은 조직의 비즈니스 구조에 맞춰 자산을 분류하여 데이터 활용 효율을 극대화합니다.

팩트디스커버 페이지와 도메인 기능은 현재 퍼블릭 프리뷰 단계로 제공됩니다. 해당 기능은 데이터브릭스의 유니티 카탈로그를 기반으로 작동하며 테이블, 대시보드, 노트북, 쿼리 등 다양한 자산을 통합 관리합니다.

교차검증데이터 자산이 파편화된 기업 환경에서는 잘못된 데이터 선택으로 인해 보고서 오류나 중복 작업이 발생할 위험이 큽니다. 특히 인공지능 에이전트가 부정확한 데이터를 학습할 경우 그 위험은 증폭됩니다.

팩트도메인 기능은 마케팅, 영업, 연구개발 등 기업의 기능별 단위나 지리적 위치에 따라 데이터를 구조화합니다. 사용자는 하위 도메인을 생성하여 재무 내 수익 분석이나 마케팅 내 고객 유지 등 세부적인 분류를 수행합니다.

주장이번 업데이트는 단순한 데이터 검색을 넘어 인공지능 에이전트에게 필요한 비즈니스 맥락을 제공하는 데 중점을 둡니다. 지니 온톨로지와 결합된 도메인 구조는 인공지능이 특정 비즈니스 영역에서 가장 신뢰할 수 있는 자산을 식별하도록 돕습니다.

팩트디스커버 페이지는 인공지능 기반 추천 기능을 통해 사용자의 활동 기록, 자산의 인기, 인증 여부 등을 분석하여 최적의 자산을 제안합니다. 데이터 관리자는 자산을 직접 인증하여 조직 내 구성원들에게 신뢰할 수 있는 데이터임을 명확히 알립니다.

교차검증데이터 관리자가 도메인을 수동으로 설정하고 자산을 분류하는 과정은 초기 구축 비용과 운영 노력을 요구합니다. 조직 내 데이터 거버넌스 체계가 미비할 경우, 도메인 분류가 새로운 관리 부담으로 작용할 가능성이 있습니다.

팩트도메인에 포함된 설명과 기술적 계약 정보는 유니티 카탈로그 시맨틱스에 통합되어 관리됩니다. 이는 향후 도입할 용어 사전 기능과 함께 수익, 예약 등 핵심 비즈니스 용어에 대한 공통된 정의를 제공합니다.

주장데이터 자산을 사람의 관점에서 조직화하는 작업은 인공지능 에이전트의 성능 향상으로 직결됩니다. 잘 정리된 데이터 환경은 인공지능이 잘못된 테이블을 참조하거나 비즈니스 개념을 오해할 확률을 낮춥니다.

팩트유니티 카탈로그는 데이터브릭스 플랫폼 전반에서 데이터 거버넌스를 통합하는 핵심 아키텍처입니다. 이번 기능은 기존 카탈로그의 자산 관리 역량을 비즈니스 계층으로 확장합니다.

주장데이터브릭스는 이번 기능을 통해 기업이 인공지능 시대에 걸맞은 데이터 체계를 구축하도록 지원합니다. 조직은 데이터의 가시성을 확보함으로써 데이터 기반 의사결정의 정확도를 높입니다.

출처데이터브릭스 공식 블로그(https://www.databricks.com/blog/announcing-public-preview-discover-and-domains-powered-unity-catalog)를 통해 해당 기능의 상세 내용과 사용 방법을 교차 검증했습니다.