기업용 AI의 병목은 모델 성능뿐 아니라 데이터가 여러 환경에 흩어져 있다는 데서 생긴다. 고객과 거래 데이터는 자체 데이터센터에, 애플리케이션 데이터는 퍼블릭 클라우드에, 규제 대상 정보는 소버린 인프라에 저장될 수 있다. AI를 적용하기 위해 데이터를 한곳으로 복제하거나 이전하면 시간과 비용이 늘고 보안과 규제 준수 문제도 복잡해진다. 클라우데라가 데이터를 이동하지 않고 데이터가 저장된 환경에서 AI 애플리케이션을 실행·관리하는 플랫폼을 내놨다.
하이브리드 데이터·AI 플랫폼 기업 클라우데라는 멀티 클라우드와 온프레미스 환경에서 프로덕션 수준의 AI 애플리케이션을 구축·배포·확장할 수 있는 ‘클라우데라 애니웨어 클라우드’를 발표했다.
클라우데라 애니웨어 클라우드는 독립형 플랫폼으로 운영하거나 기업이 보유한 대규모 데이터 레이크를 보완하는 형태로 적용할 수 있다. 데이터 저장 위치를 변경하지 않고 퍼블릭 클라우드와 소버린 인프라, 프라이빗 데이터센터에 동일한 운영 방식을 제공하는 것이 제품의 핵심이다.
클라우데라 로고 (자료 제공: 클라우데라)
기업은 단일 관리 콘솔에서 데이터와 AI 서비스를 필요한 환경에 각각 배포하고 독립적으로 확장할 수 있다. 데이터의 민감도와 지역별 규제, 인프라 비용, 성능 요구에 따라 워크로드를 배치하면서 데이터 복제와 이전을 줄이는 구조다.
예를 들어 개인정보나 산업 기밀을 사용하는 AI는 자체 데이터센터에서 운영하고, 대규모 연산이 필요한 워크로드는 퍼블릭 클라우드에 배치할 수 있다. 국가나 산업 규정에 따라 데이터의 저장 지역을 제한해야 하는 경우에는 소버린 인프라를 선택할 수 있다. 기업은 하나의 플랫폼에서 서로 다른 실행 환경을 관리하면서 데이터 저장 위치에 대한 통제권을 유지한다.
에이전틱 AI의 운영 조건, 데이터 접근과 통제 함께 설계
에이전틱 AI는 사용자의 요청을 이해하는 데서 그치지 않고 데이터를 조회하고 도구를 호출하며 여러 단계의 작업을 수행한다. 기업 내부에서 이를 활용하려면 AI 에이전트가 어떤 데이터에 접근했는지, 어떤 작업을 실행했는지, 결과의 근거가 무엇인지 추적할 수 있어야 한다.
클라우데라 애니웨어 클라우드는 퍼블릭 클라우드와 소버린 인프라, 프라이빗 데이터센터의 데이터·AI 서비스를 단일 콘솔에서 관리하도록 설계됐다. (자료 제공: 클라우데라)
클라우데라 애니웨어 클라우드는 자연어 요청을 자동화된 데이터 워크플로우로 전환하는 에이전틱 코파일럿을 제공한다. 개발자와 데이터 실무자는 자연어로 필요한 작업을 요청하고 데이터 처리와 분석, AI 기능을 배포할 수 있다. 민감한 데이터를 외부 환경으로 이동시키지 않고 데이터가 저장된 곳에서 워크플로우를 실행하도록 설계됐다.
분산된 데이터 자산에는 제로트러스트 기반의 중앙집중형 거버넌스를 적용한다. 사용자의 권한과 데이터 접근을 통제하고 데이터 계보를 추적해 퍼블릭 클라우드와 데이터센터에 걸친 정책을 일관되게 운영하는 방식이다. 새로운 데이터·AI 서비스를 배포할 때도 기존 기업의 거버넌스 정책을 자동으로 적용한다.
모듈형 데이터 서비스는 셀프서비스 마켓플레이스의 블루프린트를 통해 배포할 수 있다. 스파크와 카프카, 트리노 등 클라우데라 인증 엔진을 지원하며 기업이 선택한 오픈소스 엔진도 추가할 수 있다. 필요한 데이터 서비스만 분리해 배포하고 확장할 수 있어 전체 플랫폼을 한꺼번에 변경해야 하는 부담을 줄인다.
상호운용성에는 아파치 아이스버그와 폴라리스 카탈로그, 통합 API 등 개방형 표준을 적용했다. 하나의 분석 엔진이나 클라우드 공급자에 데이터를 종속시키지 않고 여러 도구가 같은 데이터에 접근할 수 있도록 하는 구조다. 기존 분석 시스템과 새로운 AI 애플리케이션이 데이터를 다시 복제하지 않고 연결될 수 있다는 설명이다.
레오 브루닉 클라우데라 최고제품책임자는 “기업은 혁신과 통제 가운데 하나를 선택할 필요가 없다”며 “클라우데라 애니웨어 클라우드는 데이터가 존재하는 곳에서 클라우드의 속도와 유연성을 제공하고, 고객이 데이터와 지식재산, 인프라, 토큰 비용에 대한 소유권을 유지하도록 지원한다”고 말했다.
그래프 분석 기업 퍼피그래프는 클라우데라의 아파치 아이스버그 기반 데이터에 별도의 ETL이나 데이터 이동 없이 접근해 지식 그래프로 조회하는 방식을 제시했다. AI 에이전트가 데이터베이스의 값뿐 아니라 엔티티와 관계, 맥락을 함께 이해하도록 연결하는 활용 사례다.
클라우데라 애니웨어 클라우드의 경쟁력은 지원하는 클라우드의 수보다 서로 다른 환경을 실제로 얼마나 일관되게 운영할 수 있는지에서 결정될 전망이다. 기업이 확인해야 할 지표도 데이터 이전량과 배포 시간, 워크로드 비용, 응답 속도, 권한 관리, 장애 대응 등 운영 단계에 집중된다. 분산된 데이터를 그대로 유지하면서 AI의 접근과 실행을 통제할 수 있다면 애니웨어 클라우드는 에이전틱 AI를 실험에서 기업의 핵심 업무로 옮기는 기반이 될 수 있다.
The post 데이터를 옮기지 않고 AI를 실행한다…클라우데라 ‘애니웨어 클라우드’ appeared first on 벤처스퀘어.