생성형 인공지능(AI)이 영상 제작 과정에 도입되면서 콘텐츠를 만드는 방식에도 변화가 나타나고 있다. 기존에는 기획과 대본 작성, 촬영, 편집, 자막 및 음향 작업을 각각 수행해야 했지만 최근에는 AI가 여러 제작 단계를 연결하는 기술이 개발되고 있다. 특히 이용자가 자연어로 원하는 영상을 설명하면 AI가 제작 과정을 계획하고 결과물을 생성한 뒤 수정 요청까지 처리하는 에이전트 기술이 주목받고 있다. 딥브레인AI가 이러한 영상 제작 과정을 통합하는 AI 비디오 에이전트 개발을 위해 정부 연구개발 과제를 수행한다.
생성형 AI 전문기업 딥브레인AI(대표 장세영)는 중소벤처기업부와 중소기업기술정보진흥원이 추진하는 ‘중소기업기술혁신개발사업(글로벌선도기술개발)’의 연구개발 과제 주관기관으로 선정됐다.
딥브레인AI, 중기부 R&D 단독 주관기관을 맡았다. (자료 제공: 딥브레인AI)
이번 과제는 ‘비디오 파운데이션 모델 기반 콘텐츠 자동 생성 AI 비디오 에이전트 개발’로, 딥브레인AI가 단독 주관기관을 맡아 수행한다.
연구개발 기간은 2026년 9월부터 2028년 8월까지 2년이다. 총연구개발비는 15억원 규모이며, 이 가운데 정부지원 연구개발비는 10억원이다. 2026년 정부지원금은 1억6600만원으로 책정됐다.
딥브레인AI는 이번 과제를 통해 영상 제작의 기획부터 대본 작성, 스토리보드 구성, AI 아바타 생성, 자막과 배경음악 삽입, 편집 및 수정까지 연결하는 AI 에이전트를 개발할 계획이다.
핵심은 이용자가 복잡한 영상 편집 도구를 직접 조작하지 않고 자연어로 원하는 결과물을 설명하면 AI가 제작 과정을 수행하도록 하는 것이다. 이용자가 영상의 목적과 내용, 형식을 입력하면 AI가 이를 분석해 제작 계획을 세우고 필요한 작업을 순차적으로 처리하는 방식이다.
영상 제작 과정에서 추가 요청이나 수정 사항이 발생하면 대화를 통해 변경 내용을 반영하는 기능도 개발한다. 생성 과정에서 오류가 발생했을 때 이를 감지하고 복구하는 기능과 여러 AI 에이전트가 작업을 분담하는 협업 구조도 연구 대상에 포함된다.
비디오 파운데이션 모델·AI 아바타·멀티에이전트 결합…2028년 상용화 목표
딥브레인AI는 이번 연구개발을 세 가지 핵심 기술을 중심으로 추진한다.
첫 번째는 비디오 파운데이션 모델을 활용한 영상 기획 및 콘텐츠 생성 기술이다. 문서와 웹페이지, 이미지, 영상, 음성 등 다양한 형태의 자료를 분석해 영상 제작에 필요한 대본과 스토리보드를 자동으로 구성하는 기능을 개발한다.
마케팅과 교육, 커머스, 뉴스 등 콘텐츠의 활용 목적에 따라 적합한 영상 구성과 표현 방식을 제안하도록 설계할 계획이다.
특히 검색증강생성(RAG) 기술을 활용해 기업이 보유한 자료와 브랜드 정보를 영상 제작에 반영하는 기능을 구현한다. 기업 로고와 브랜드 색상, 제품 정보 등 내부 자료를 참고해 콘텐츠를 생성하도록 하는 방식이다.
두 번째는 AI 아바타 기반 영상 합성 기술이다. 영상의 목적과 장르에 맞는 AI 아바타를 생성하고, 다국어 음성과 입 모양을 일치시키는 립싱크 기술을 고도화한다.
아바타의 동작과 제스처도 콘텐츠의 성격에 맞춰 표현할 수 있도록 개발한다. 이를 통해 별도의 촬영 과정 없이 다양한 언어와 형식의 영상 콘텐츠를 제작할 수 있는 환경을 구축한다는 구상이다.
세 번째는 영상 제작 전 과정을 통합적으로 관리하는 AI 에이전트 기술이다. 이용자의 요청을 분석해 작업 계획을 수립하고, 대본 작성과 아바타 생성, 영상 합성, 자막 및 배경음악 삽입 등 필요한 기능을 연결한다.
여러 AI 에이전트가 각각의 작업을 분담하고 결과물을 통합하는 멀티에이전트 구조도 개발한다. 영상 생성 과정에서 발생하는 오류를 확인하고 필요한 작업을 다시 수행하는 자동 복구 기능도 포함할 계획이다.
딥브레인AI는 이러한 기술을 자사의 영상 제작 서비스 ‘AI 스튜디오(AI Studios)’와 연계할 예정이다.
연구개발 첫해인 2026년에는 서비스 요구사항을 분석하고 핵심 기술을 설계하는 한편, 주요 기능의 초기 검증을 진행한다.
2027년에는 AI 스튜디오와 연계한 베타 버전을 개발하고 실제 이용 환경에서 기술을 검증할 계획이다. 기업 고객을 대상으로 한 시범 적용을 통해 영상 제작 과정에서 필요한 기능과 사용성을 점검한다.
연구개발 마지막 해인 2028년에는 통합 시스템 검증과 공인시험기관 시험 등을 추진한다. 개발 성과를 바탕으로 AI 스튜디오의 표준 기능에 비디오 에이전트를 적용하고 해외 시장을 대상으로 기술 시연과 사업화를 추진할 방침이다.
이번 과제는 영상 생성 모델과 AI 아바타, 콘텐츠 제작 자동화 기술을 하나의 서비스로 연결하는 데 의미가 있다. 딥브레인AI는 기업이 반복적으로 제작하는 마케팅과 교육, 상품 소개 등의 콘텐츠를 보다 효율적으로 제작할 수 있도록 지원한다는 목표다.
다만 이번에 발표한 AI 비디오 에이전트는 연구개발 과제로 추진되는 기술로, 대화형 영상 제작과 자동 수정 등 주요 기능의 개발과 검증은 향후 단계적으로 진행된다.
장세영 딥브레인AI 대표는 “영상 제작 방식이 복잡한 편집 도구를 다루는 것에서 AI와의 대화를 통해 원하는 결과물을 완성하는 방향으로 변화하고 있다”며 “이번 과제를 통해 기업이 기획부터 제작, 수정 및 배포까지 효율적으로 수행할 수 있는 환경을 구축하고, AI 기반 영상 제작 기술의 활용 범위를 확대해 나가겠다”고 말했다.
딥브레인AI는 이번 연구개발을 통해 축적한 기술을 기존 AI 영상 제작 서비스와 결합하고, 기업용 콘텐츠 제작 시장에서 AI 에이전트 기반 자동화 기능을 확대할 계획이다.
The post 딥브레인AI, 15억원 규모 정부 R&D 단독 수행…대화로 영상 제작·편집하는 AI 에이전트 개발 appeared first on 벤처스퀘어.