AI 코딩 어시스턴트로 실제 영상 편집까지 수행하는 오픈소스 스튜디오
좋아하는 유튜브 쇼츠 링크를 붙여넣고 '이런 느낌으로 양자역학 영상을 만들어줘'라고 말하기만 하면, AI가 대본 작성부터 자재 검색, 편집, 최종 렌더링까지 처리합니다. OpenMontage는 AI 코딩 어시스턴트를 영상 제작 스튜디오로 전환하는 오픈소스 시스템입니다. 정지 이미지를 움직이는 것처럼 보이는 트릭이 아니라, 무료 아카이브의 실제 영상 클립을 검색해 타임라인에 배치하는 방식도 지원합니다.
참고 영상 기반 제작 플로우
빈 화면에서 프롬프트를 고민하는 대신, 기존 영상을 참고 자료로 활용할 수 있습니다. 시스템은 해당 영상의 리듬, 훅, 구조, 톤을 분석한 뒤 주제와 시각적 처리 방식을 변경한 2~3개의 차별화된 컨셉을 제안합니다. 이때 예상 비용과 현재 사용 가능한 도구로 만들 수 있는 결과물의 예시를 함께 보여줍니다. 이 과정은 추측성 프롬프트 나열이 아니라, 참고 영상의 장점을 유지하면서 새로운 주제로 전환하는 구체적인 제작 계획 수립입니다.
백로트 보드와 실시간 승인 게이트
채팅창의 텍스트만으로는 제작 진행 상황을 파악하기 어렵지만, 백로트 보드는 파이프라인이 실행되는 동안 자동으로 채워지는 로컬 보드입니다. 스크립트가 시나리오 페이지로 표시되고, 자재 생성 중에는 씬 카드가 빛나며, 모든 프로바이더 결정과 지출 금액이 벽면에 기록됩니다. 특히 자재 생성 단계에서는 씬별 컨택트 시트가 표시되며, 렌더링 전에 시각적 자재를 승인하는 게이트 역할을 합니다. 사용자가 채팅으로 답변할 때까지 제작이 일시 정지되어, 후반 작업에서 발견하기 어려운 문제를 미리 차단합니다.
무료 도구로 완성하는 실제 영상 제작
유료 API 키 없이도 Piper TTS, Archive.org, NASA, Wikimedia Commons 등 무료 오픈 소스를 활용해 실제 움직임이 있는 영상을 만들 수 있습니다. 다큐멘터리 몽타주 파이프라인은 CLIP 검색 가능한 코퍼스를 구축하고, 무료 스톡 영상과 아카이브에서 실제 모션 클립을 검색해 타임라인에 편집합니다. 이는 정지 이미지를 움직이는 것처럼 보이는 트릭이 아니라, 실제 영상 클립을 의도적으로 편집하여 완성된 작품으로 렌더링하는 과정입니다. Remotion과 HyperFrames는 데이터 기반 설명 영상과 모션 그래픽 중심의 브리프에 따라 자동으로 선택되어 최적의 렌더링 엔진을 사용합니다.
설치 환경과 요구 사항
Claude Code, Cursor, Copilot, Windsurf, Codex 등 파일을 읽고 코드를 실행할 수 있는 AI 코딩 어시스턴스가 필수입니다. make setup 명령으로 환경을 설정한 뒤, 프로젝트 폴더를 AI 어시스턴트에 열어 원하는 영상을 설명하면 됩니다. API 키는 선택 사항이며, 더 많은 키를 추가할수록 FLUX, Veo, Kling, ElevenLabs 등 다양한 유료 및 무료 프로바이더를 활용할 수 있습니다. 로컬 GPU 모델을 사용하려면 make install-gpu를 실행하고 .env 파일에 관련 설정을 추가해야 합니다.
제작 품질을 지키는 검증 체계
모든 제작 과정은 연구, 제안, 대본, 씬 계획, 자재, 편집, 합성이라는 구조화된 흐름을 따릅니다. 각 단계에는 마크다운 형식의 디렉터 스킬 파일이 있어 AI가 해당 단계를 어떻게 실행해야 하는지 정확히 안내받습니다. 렌더링 전후로 ffprobe 검증, 프레임 샘플링, 오디오 레벨 분석, 자막 체크 등 다중 포인트 셀프 리뷰가 수행됩니다. 모든 프로바이더 선택은 7가지 차원에서 점수를 매겨 결정되며, 이 모든 결정 과정은 감사 가능한 로그로 기록됩니다. 예산 관리 기능은 실행 전 비용 추정, 지출 상한선, 행동별 승인 임계값을 설정하여 예상치 못한 비용을 방지합니다.
