데이터브릭스는 27일 데이터브릭스 네이티브 애플리케이션을 개발하도록 지원하는 '레이크하우스 앱(Lakehouse Apps)'을 출시했다고 밝혔다.
새롭게 출시된 레이크하우스 앱을 통해 기업들은 가장 안전한 방식으로 레이크하우스에서 데이터의 가치를 극대화하는 애플리케이션을 구동하는 것은 물론, 데이터브릭스 네이티브 서비스를 활용하며 새로운 기능을 통해 데이터브릭스 서비스를 확장할 수 있다.
뿐만 아니라 레이크하우스 앱은 사용자가 여러 혁신적인 신규 애플리케이션에 보다 안전하고 쉽게 액세스 하는 동시에 데이터 및 AI 애플리케이션을 채택, 통합 및 관리하는 데 드는 시간과 노력을 최소화하도록 한다.
오늘날 소프트웨어 공급업체는 혁신적인 차세대 애플리케이션을 사용자에게 제공하는 과정에서 다양한 도전과제를 마주하게 된다. 고객 데이터에 안전하게 접근하고, 고객의 보안 및 거버넌스 솔루션을 통합하며, 고객의 데이터와 가까운 위치에서 애플리케이션을 효율적으로 실행해야 하기 때문이다.
현재 많은 개발자들은 자신이 개발한 애플리케이션 채택을 촉진하기 위해 크게 두 가지 접근방식을 취하고 있다. 첫 번째는 애플리케이션의 기능을 제한하여 주요 부분을 데이터 플랫폼 공급업체의 SQL 또는 독점 코드로 재구축하는 것이다. 두 번째는 고객이 직접 설치 및 운영해야 하는 별도의 제품 버전을 개발하는 것인데, 이러한 접근방식은 보안에 취약하고 확장성이 낮다는 한계점이 있다.
레이크하우스 앱은 개발자들이 안전하면서도 성능저하가 없는 네이티브 솔루션을 통해 이 같은 딜레마를 극복할 수 있도록 지원한다. 레이크하우스 앱은 고객의 데이터브릭스 인스턴스에서 직접 실행된다. 따라서, 데이터가 고객의 인스턴스를 벗어나지 않고도 애플리케이션과 쉽고 안전하게 통합되고, 데이터브릭스 서비스를 확장하며, 싱글 사인온(SSO) 환경과 상호작용할 수 있다.
아울러 레이크하우스 앱은 데이터브릭스와 동일한 수준의 보안, 개인정보보호 및 컴플라이언스를 보장하며 개발자는 특정 프레임워크에 국한되지 않고 원하는 기술과 언어를 사용해 다양한 애플리케이션을 구축할 수 있다.
또한 개발자들은 자신들의 레이크하우스 앱을 데이터브릭스 마켓플레이스에 등록해 보다 간편하게 배포할 수 있으며, 이를 통해 사용자들은 원하는 소프트웨어를 신속하게 검색해 바로 사용할 수 있다.
데이터브릭스는 자사 마켓플레이스에서 AI 모델 공유 기능을 추가로 제공할 예정이다. 해당 기능은 데이터 소비자 및 제공자가 AI 모델을 수익화하고 자신의 데이터 솔루션에 통합할 수 있도록 지원한다.
데이터브릭스 고객은 AI 모델 공유를 통해 업계 최고 수준의 AI 모델에 자신의 데이터를 신속하고 안전하게 적용할 수 있다. 데이터브릭스는 명령어 추종 및 텍스트 요약과 같은 일반적인 사용사례 전반에 걸쳐서 오픈소스 모델을 선별 및 공개하고, 데이터브릭스 플랫폼에서 해당 모델의 튜닝 및 배포를 최적화하는 작업을 진행할 계획이다.
마테이 자하리아 데이터브릭스 공동창업자 겸 CTO는 "레이크하우스 앱을 통해 소프트웨어 제공업체는 레이크하우스 내에서 다양한 애플리케이션을 안전하게 제공할 수 있게 됐다"며 "이는 데이터브릭스 고객과 소프트웨어 공급업체 모두에게 상당한 이점을 가져다줄 것으로, 애플리케이션이 신규 고객에게 도달하는 데 따르는 여러 과제를 해결할 것"이라고 말했다.
그는 또한 "특히 기업 간 협업이 단순한 데이터셋 교환을 넘어 안전한 환경에서 공동 데이터를 가지고 연산 및 AI 모델을 구축하는 방향으로 진화하고 있는 이 시점에, 애플리케이션뿐 아니라 AI 모델까지 포괄하는 데이터브릭스 마켓플레이스는 오늘날 매우 중요한 비즈니스 요구를 충족시켜 줄 것"이라고 강조했다.
데이터브릭스 마켓플레이스는 현재 프리뷰로 공개되었으며, 2023년 6월 28일 정식 출시될 예정이다. 레이크하우스 앱과 데이터브릭스 마켓플레이스의 AI 모델 공유 기능은 2024년 프리뷰로 공개될 예정이다.
헬로티 이창현 기자 |
