먼저 영상을 하나 보세요. 2 분 08 초짜리 원테이크 영상입니다.
다음은 같은 기법으로 만든, 실제 작업에 더 적합한 영상입니다. SpaceX 의 24 년 역사를 담고 있죠.
이런 화이트보드 애니메이션은 Bilibili 나 YouTube 에서 긴 설명이나 튜토리얼을 만들 때 특히 유용하다고 생각합니다. 내레이션에 맞춰 캐릭터, 사건, 관계를 단계별로 그려 나가면 시청자가 시각적 흐름을 자연스럽게 따라갈 수 있으니까요. 지식 공유, 제품 데모, 강의용 애니메이션 제작 등에 이 방식을 활용해 보세요.
첫 번째 영상에서는 제 만화 아바타가 라스코 동굴 벽화에서 출발해 23 가지의 서로 다른 미술 스타일을 거쳐, 마침내 2026 년 제 책상으로 돌아옵니다. 그림 속으로 들어갈 때마다 그 작품의 화풍으로 바뀌며 안의 요소들과 상호작용합니다. 고대 이집트 벽화에서 태양을 밀고 있는 풍뎅이를 뛰어넘고, 호쿠사이 판화의 거대한 파도 아래로 몸을 숙이고, 모네의 일본식 다리 위에서 물수제비를 뜨고, 뭉크의 인물 옆에서 함께 비명을 지르며(모자가 날아갑니다), 8 비트 밤하늘에서는 동전을 톡 튀어나오게 하죠.
배경은 코드로 그려졌고, 사운드트랙 역시 샘플 없이 코드로 음표 하나하나를 합성했습니다. Codex 의 ImageGen 으로 생성한 제 아바타(솔직히 지금 이미지 생성 어시스턴트로서는 Codex 가 딱 쓸 만한 수준입니다)를 제외하면, 나머지 모든 작업은 Claude Code 에서 Opus 5.5 가 처리했습니다. 참고 영상을 받은 순간부터 최종 편집본이 나오기까지 하루도 채 걸리지 않았습니다.
이 애니메이션을 만드는 방법을 huashu-art-motion 이라는 스킬로 정리했습니다. 설치만 하면 "반 고흐의 '별이 빛나는 밤' 스타일로 15 초짜리 애니메이션 만들어 줘"라고 바로 요청하거나, 참고할 단편 영상을 주고 이를 해체하고 재현하게 할 수도 있고, 내레이션에 맞춘 설명용 애니메이션을 만들 수도 있습니다.
Fable 5.5 에서 시작된 이야기
최근 X 의 AI 커뮤니티를 둘러보셨다면 Fable 5.5 로 만들었다는 애니메이션들이 쏟아지는 걸 보셨을 겁니다. 어떤 사람은 프롬프트 하나로 오리지널 음악이 포함된 3 분짜리 애니메이션 단편을 받아내 6,000 개 이상의 좋아요를 받았고, 또 다른 사람은 슈퍼맨이 원테이크로 다양한 미술 스타일을 끊임없이 통과하는 영상으로 조회수 67 만을 찍었습니다. 그리고 Tak(@cherry_mx_reds)이 처음 올린 15 초짜리 미술사 애니메이션에는 고양이와 사람이 차를 마시는 장면이 담겨 있었고, 배경은 동굴 벽화에서 플랫 일러스트로 계속 변했습니다.
한국어권 커뮤니티에서는 사실 이 게시물의 리트윗 버전을 본 분들이 많은데, 놀랍게도 원본보다 북마크 수가 더 많았습니다.
오늘까지 Anthropic 은 Fable 5.5 를 공식 출시하지 않았으며, 최신 공식 버전은 여전히 9 월 1 일에 공개된 Fable 5.1 입니다. 이 작품들은 그레이 스케일 테스트를 통해 Fable 5.5 로 라우팅되었다고 주장하는 사용자들이 만든 것입니다. (판별 방법은 이른바 '티보 테스트'라는 비공식 방법인데, 모델에게 OpenAI Codex 팀의 티보를 아는지 물어보고 제대로 답하면 지식이 업데이트된 새 모델로 간주하는 방식입니다.) 모델 버전 자체는 공식 확인되지 않았습니다.
저도 그 영상을 Claude Code 에 넣고 똑같이 재현해 봤습니다. 하지만 비슷한 결과물을 만들고 나서 제가 더 남기고 싶었던 건 '방법'이었습니다. 어떻게 미술 스타일을 해체하고, 장면 속 요소를 움직이게 하며, 이 과정을 다음 주제에도 다시 쓸 수 있을까 하는 것이었죠.
재현하는 과정에서 흥미로운 디테일이 있었습니다. 원본 영상에서 어떤 영역이 움직이는지 파악하기 위해 모션 히트맵을 자동으로 생성하더군요. 각 시대는 1 초 남짓에 불과했지만, 파도는 넘실거리고 텍스트는 깜빡이며 화면 내부에서 움직임이 끊이지 않았습니다. 나중에 이런 해체 기법들을 스킬에 모두 담아냈습니다.
글 속 정지 프레임들에 해당하는 전체 샘플 영상은 위 원본 링크에서 확인할 수 있습니다.
재현 과정에는 없던 영상
그래서 재현을 마친 그날 밤, 원본에는 없던 주제를 하나 던져봤습니다.
내 만화 아바타를 사용해 최소 20 가지의 서로 다른 스타일 장면을 여행해 줘. 아바타는 장면에 따라 모습이 바뀌어야 하고, 모네의 일본식 다리를 지나치거나 연꽃 연못에서 물수제비를 뜨는 것처럼 장면 속 특정 사물과 상호작용해야 해.
이 영상에서 배경과 스타일은 코드로 그려졌습니다. 제 아바타의 각 스타일별 동작 프레임은 gpt-image 로 다시 그린 뒤, 코드에서 위치, 크기, 타이밍을 지정해 각 미술 스타일에 맞는 붓터치를 캐릭터 위에 덧입혔습니다.
사운드트랙 역시 미술 스타일을 따릅니다. 동굴 구간에서는 뼈 피리와 핸드 드럼, 둔황에서는 비파, 우키요에에서는 샤미센과 샤쿠하치, 8 비트에서는 구형파 소리가 나옵니다. 모든 소리는 코드로 합성되며, 장면이 전환될 때 악기와 선법이 함께 바뀝니다.
실제 업무에 적용해 보기
하지만 모델의 성능이나 제가 그것을 다루는 능력을 보여주는 것보다, 제가 더 중요하게 생각하는 건 이것이 실제 업무에 쓰일 수 있는지 여부입니다.
그래서 YouTube 에서 흔히 볼 수 있는 8 가지 설명 스타일을 추가했습니다. Whiteboard, Vox, Kurzgesagt, 3Blue1Brown, Keynote UI, Financial Charts, Storytelling, Dynamic Text 등입니다. 데이터를 다룰 때는 Financial Charts 를 쓰고, 수학이나 AI 개념은 3b1b 를 시도해 보고, 소프트웨어 튜토리얼의 인터페이스 조작에는 Keynote UI 를 사용하는 식으로, 설명하는 내용에 맞춰 스타일을 선택하면 됩니다.
앞서 보여드린 화이트보드 외에도, 마찬가지로 SpaceX 의 24 년을 다룬 Vox 스타일 영상입니다.
같은 주제라도 표현 방식을 바꾸면 시각적인 느낌이 완전히 달라집니다. 내레이션 대본을 넘겨주고 길이에 맞는 애니메이션 클립을 생성해 편집 중인 영상에 삽입할 수도 있고, 이 두 예시처럼 하나의 완성된 설명을 통째로 애니메이션으로 바꿀 수도 있습니다.
개인적으로 저는 이 부분을 훨씬 자주 쓰게 될 것 같습니다. Bilibili 나 YouTube 용 긴 영상을 만들다가 말로만은 설명하기 까다로운 부분이 생기면, 내레이션에 맞춰 그래픽이 단계별로 펼쳐지는 별도 구간을 넣을 수 있으니까요.
이 스킬 안에 담긴 것들
위에서 언급한 8 가지 설명 스타일 외에도 수십 장의 미술 스타일 카드가 포함되어 있습니다. 동굴 벽화, 고대 이집트, 우키요에, 인상주의부터 반 고흐, 뭉크, 달리, 호퍼, 팝아트, 스튜디오 지브리, 신카이 마코토, 베이퍼웨이브까지 다양하죠. 각 카드에는 컬러 팔레트, 붓터치 기법, 애니메이션 방법, 그리고 현재의 한계가 기록되어 있어 다음번에 개선해 나갈 수 있습니다.
참고 영상을 해체하고, 캐릭터 프레임을 생성 및 합성하고, 사운드트랙을 영상에 동기화하는 방법도 담겨 있습니다. 작업이 끝나면 프로그램이 정지 프레임이나 부자연스러운 점프 같은 문제를 점검하고, 이후 독립적인 에이전트가 최종 편집본을 검토하며 흠결을 찾아냅니다.
저는 항상 실제로 잘 작동했던 부분(방법, 근거, 이유, 언제 적용할지)을 기록하도록 요구합니다. 그래야 다음에 주제나 스타일, 심지어 모델을 바꾸더라도 이 경험이 그대로 이어집니다.
스킬 받아가기
이 스킬은 GitHub 에 오픈소스로 공개되어 있습니다.
https://github.com/alchaincyf/huashu-art-motion
설치 방법(Claude Code, Codex, Cursor 등 스킬을 지원하는 모든 에이전트에서 작동):
npx skills add alchaincyf/huashu-art-motion
영상을 렌더링하려면 로컬 환경에 uv 와 ffmpeg 가 필요합니다. 첫 렌더링 전에 헤드리스 브라우저를 설치하세요: uv run --with playwright install chromium.
