Muse Spark Open 활용법: 영상 편집부터 3D 수정까지, 핵심은 다시 보기

Muse Spark Open으로 무엇을 할 수 있을까요? Meta가 2026년 10월 15일 공개한 이 오픈 웨이트 모델은 텍스트, 이미지, 오디오, 동영상을 함께 활용해 작업을 이해하고, 에이전트를 통해 도구를 호출하며 일을 진행할 수 있습니다. 창작자에게 특히 참고가 되는 방향은 두 가지입니다. 영상 소스를 확인해 사용할 구간을 고르는 것과, 여러 각도의 렌더링 이미지를 보며 3D 에셋을 계속 수정하는 것입니다.

모델이 출력하는 것은 텍스트입니다. 실제 자르기는 편집 프로그램이 실행하고, 입체 객체의 표시는 코드와 렌더러가 담당합니다. 이 단계를 연결해야 '제안하기'에서 '작업 후 무엇을 고쳐야 하는지 다시 확인하기'로 나아갈 수 있습니다.

영상 편집은 남길 구간을 고르는 것부터

Meta의 공개 발표에는 로컬 환경에서 진행한 워크플로 테스트가 소개되어 있습니다. Muse Spark Open을 탑재한 Muse Code가 DaVinci Resolve를 조작하고, 소스를 프레임 단위로 살펴보며 가장 좋은 구간을 찾은 뒤 세로 화면으로 잘랐습니다.

여기에는 서로 다른 두 가지 판단이 들어갑니다. 구간을 고를 때는 동작, 감정, 정보가 온전히 전달되는지 봐야 합니다. 세로 화면으로 자를 때는 피사체와 중요한 세부 요소가 화면 안에 남는지 확인해야 합니다. 도입부에 적합한 순간이라고 해서 그대로 세로로 잘라도 좋은 것은 아닙니다. '왜 선택하는지'와 '어디를 자르는지'를 나눠 적으면 조정할 부분이 분명해집니다.

이 방식을 자신의 프로젝트에 적용하려면 먼저 편집 계획을 요청할 수 있습니다. 다음은 작업 예시입니다.

영상 소스를 제공하겠습니다. 목표는 30초짜리 세로형 예고편입니다.
먼저 남기기를 추천하는 구간의 시작과 종료 시간, 선택 이유, 유지해야 할 동작이나 대사를 나열해 주세요.
각 구간에서 9:16 화면의 중심이 무엇인지, 자르면 어떤 중요한 정보가 사라질 수 있는지 설명해 주세요. 세로 화면에 적합하지 않은 구간은 따로 정리해 주세요.
계획을 확인받은 뒤 실행하고, 매번 수정할 때는 확인된 문제만 처리해 주세요.

이 결과물의 가치는 확인할 수 있다는 점입니다. 어떤 구간을 제외한 이유나 대사가 중간에 잘렸는지를 구체적인 위치를 짚어 논의할 수 있습니다. 부족한 장면도 추가 촬영 요건으로 정리한 다음 스토리보드와 영상 제작을 이어갈 수 있습니다.

3D는 정면이 좋아 보이는 것만으로 부족합니다

Hugging Face의 실제 테스트는 또 다른 방식을 보여 주었습니다. 2-bit로 양자화한 Muse Spark Open에 코딩 에이전트 Pi와 llama.cpp를 결합했습니다. 모델이 Three.js 에셋 코드를 작성하고 브라우저에서 렌더링한 뒤, 여러 각도의 스크린샷을 같은 모델에 전달해 확인하게 했습니다. Pi는 눈에 보이는 문제를 바탕으로 코드를 수정하며 다음 라운드로 진행했습니다.

공개된 작업에는 축에 맞춘 시점, 비스듬한 시점, 세부 시점 등 열 개의 고정 시점이 설정되어 있었고, 다섯 차례 개선에 대한 스크린샷, 평가, 수정 기록을 남기도록 요구했습니다. 카메라 위치, 조명, 객체 방향을 고정하는 것이 중요합니다. 매번 각도가 달라지면 구조가 실제로 개선되었는지 판단하기 어렵습니다.

이 방법은 '더 정교하게'라는 요청을 위치가 분명한 수정으로 바꿉니다. 먼저 어느 시점의 어느 부분에 어떤 문제가 보이는지 짚은 다음 수정안을 제시해야 합니다. 다음 라운드에서도 같은 시점으로 돌아와 해결되었는지 확인해야 합니다. 라운드 수 자체가 품질을 뜻하지는 않으며, 해결되지 않은 결함은 문제 목록에 계속 남겨야 합니다.

이 확인 방식은 캐릭터 설정 시트, 물건의 여러 방향 이미지, 영상의 추가 장면 제작에도 적용할 수 있습니다. 다음 작업 예시로 수정 의견을 정리할 수 있습니다.

같은 객체의 윤곽, 색상, 핵심 세부 요소를 유지하고, 고정된 정면·측면·후면·세부 시점을 비교해 주세요.
먼저 '시점 — 위치 — 보이는 문제 — 제안하는 수정' 형식으로 목록을 작성해 주세요.
이번에는 확인된 1~3개 항목만 수정하고 나머지는 그대로 유지해 주세요.
수정 후에는 같은 시점에서 항목별로 비교하고, 해결된 점과 남아 있는 점을 설명해 주세요. 명확하게 보이지 않는 부분은 추측하지 마세요.

여러 시점의 콘셉트 이미지와 실행 가능한 3D 에셋은 서로 다른 결과물입니다. 전자는 형태와 수정 요건을 분명히 하는 데 도움이 되고, 후자에는 코드, 기하 구조, 실제 렌더링도 필요합니다. 자신에게 필요한 완성품을 기준으로 검토해야 합니다.

창작 요구사항에 결과를 다시 보는 과정을 넣으세요

두 사례는 같은 창작 흐름을 공유합니다. 소스를 관찰하고, 실행 가능한 결정을 내리고, 도구가 작업하게 한 뒤 결과로 돌아와 확인하는 것입니다. 편집에서는 시간 구간과 화면의 중심을, 형태 작업에서는 고정 시점과 구체적인 부분을 봅니다. 피드백의 위치가 분명할수록 다음 수정을 설명하기 쉬워집니다.

PagePop에서 이미지나 동영상을 만들 때도 명확한 창작 요구사항으로 시작할 수 있습니다. 참고 자료를 제공하고, 완성할 작업물과 반드시 유지할 내용, 이번에만 바꿀 부분을 적어 주세요. 결과를 받으면 구체적인 이미지나 장면을 대상으로 조정해 나가면 됩니다. 형용사를 계속 늘리는 것보다 이미 만족한 부분을 유지하면서 다음 수정으로 나아가기 쉽습니다.