데이터브릭스, 에이전트 시대 겨냥한 오픈쉐어링 표준 도입

주장데이터브릭스는 에이전트 중심의 인공지능 시대를 맞아 기존 데이터 공유 방식의 한계를 극복하고자 오픈쉐어링을 도입했습니다. 이는 단순한 데이터 공유를 넘어 인공지능 모델과 에이전트까지 포괄하는 차세대 개방형 프로토콜입니다.

팩트지난 2021년 처음 선보인 델타 쉐어링은 현재 2만 8000개 이상의 데이터 수신자가 사용하고 있습니다. 전체 공유의 33%는 오픈 커넥터를 통해 플랫폼 간에 이루어지며 에스에이피(SAP), 아틀라시안, 메르세데스-벤츠 등 주요 기업이 이 프로토콜을 채택했습니다.

교차검증기존 데이터 공유 프로토콜은 특정 벤더의 형식에 종속되거나 인공지능 로직을 처리하지 못하는 한계가 있었습니다. 새로운 파트너와 연결할 때마다 복잡한 네트워크 설정으로 수주가 소요되는 비효율적인 문제도 지속되었습니다.

팩트오픈쉐어링은 리눅스 재단에서 관리하는 오픈소스 프로젝트로 전환되어 누구나 구현 가능한 표준 사양을 제공합니다. 데이터브릭스는 이를 기반으로 유니티 카탈로그와 연동된 기업용 구현체를 제공하여 거버넌스와 감사 기능을 강화했습니다.

주장이번 발표의 핵심은 지니 에이전트 공유 기능으로 기업이 데이터뿐만 아니라 인공지능 기반의 대화형 분석 환경까지 공유할 수 있게 된 점입니다. 기업은 비즈니스 지표와 인공지능 로직을 파트너와 안전하게 공유하며 새로운 수익 모델을 창출합니다.

팩트오픈쉐어링은 시큐어커넥트 기능을 통해 복잡한 방화벽 설정 없이도 클라우드 간 데이터 공유를 지원합니다. 글로벌 배포 기능은 데이터 복제본을 지역별로 자동 생성하여 데이터 전송 비용을 절감하고 응답 속도를 높입니다.

교차검증모든 데이터를 클라우드로 옮기는 작업은 규제나 데이터 중력 문제로 인해 현실적으로 불가능한 경우가 많습니다. 오픈쉐어링은 온프레미스 저장소와 직접 연결되어 데이터를 이동하지 않고도 거버넌스 체계 내에서 관리합니다.

팩트오픈쉐어링은 델타 레이크뿐만 아니라 아파치 아이스버그 레스트 카탈로그 에이피아이를 지원하여 호환성을 대폭 확장했습니다. 에이더블유에스 글루, 하이브 메타스토어, 스노우플레이크 호라이즌 등 외부 카탈로그의 데이터도 복제 없이 공유 생태계로 통합합니다.

주장데이터 생태계는 특정 플랫폼에 갇히지 않고 개방형 표준을 따를 때 가장 크게 성장합니다. 오픈쉐어링은 데이터가 존재하는 곳에서 필요한 사람에게 즉시 흐르게 함으로써 기업 데이터의 잠재 가치를 실현합니다.

주장이번 표준 도입은 데이터브릭스가 지향하는 개방형 데이터 아키텍처의 연장선에 있습니다. 기업은 파트너사와 더욱 유연하게 데이터를 교환하며 인공지능 기반의 의사결정 속도를 높일 수 있습니다.

주장앞으로 오픈쉐어링은 다양한 산업군에서 데이터 사일로 현상을 해소하는 핵심 기술로 자리 잡을 전망입니다. 데이터브릭스는 표준화를 통해 더 많은 기업이 데이터 공유 생태계에 참여하도록 유도할 방침입니다.

출처데이터브릭스 공식 블로그(databricks.com/blog/introducing-opensharing-next-evolution-delta-sharing-agentic-era)와 오픈쉐어링 공식 누리집(opensharing.io)을 교차 검증했습니다.