안녕하세요, 저는 청펑입니다.
일주일 동안 편집 기술을 사용하여 편집 에이전트를 만들었습니다.
정말 만족스러워요!
30 분짜리 동영상을 10 분 만에 자동으로 편집할 수 있어요.
저는 주로 CapCut (Jianying)을 사용해서 토킹헤드 동영상을 편집하는데, 한동안 사용하다 보니 몇 가지 문제점을 발견했습니다:
문제 1: 스마트 컷팅이 의미를 이해하지 못함
의미를 이해하지 못하기 때문에 반복되는 구간을 식별하지 못합니다. 한 번에 20~30 분 동안 말하면 직접 편집하기가 매우 힘듭니다.
문제 2: 자막 품질이 낮음
자동 생성된 자막에 오타가 많습니다.
그래서 Claude Code의 Skills 기능을 사용하여 편집 Agent를 만들었습니다.
근본적인 차이는 간단합니다:
주요 차이점:
- CapCut = 고정된 도구 + 수동 조작
- Agent = 적응형 시스템 + 자동 학습
저는 CapCut을 더 나은 알고리즘으로 대체하는 것이 아니라, 스스로 개선되는 시스템으로 대체하는 것입니다.
하지만 그것이 가장 인상적인 부분은 아닙니다.
가장 인상적인 부분은: 사용할수록 당신을 더 잘 이해하고, 점점 더 빨라진다는 점입니다.
세 가지 핵심 설계
1. Agent 로직
4 단계만 필요합니다:
2. Skills 시스템
이전에는 모든 기능을 하나의 큰 skill로 만들었는데, 서로 다른 작업을 구분하기 위해 지시사항이 필요해서 매우 번거로웠습니다.
이제 편집의 5 가지 핵심 작업을 5 개의 독립적인 skill로 만들어 .claude/skills/ 디렉토리에 넣었습니다. 이렇게 하면 더 명확하고 선택하기 쉽습니다.
/v 를 입력하면 Claude Code가 자동으로 이 5 가지 사용 가능한 skill을 나열합니다:
하나를 선택하면 AI가 그 skill을 실행합니다. 간단하죠? 예전에는 10 분 동안 수동으로 작업해야 했던 것이 이제는 메뉴에서 선택만 하면 됩니다.
모든 방법론은 Skills에 작성되어 있으므로 매번 지시사항을 반복할 필요가 없습니다.
여러 개의 독립적인 skill로 나눈 핵심 이유는: 인간이 단계별 출력을 확인해야 하기 때문입니다. 예를 들어, 검토 초안이 올바른지 확인한 후 확인 후 편집을 실행해야 합니다.
3. 자체 업데이트 메커니즘: 사용할수록 당신을 더 잘 이해합니다
이것이 제가 가장 자랑스러워하는 설계입니다. 각 작업 실행 후 피드백을 제공할 수 있으며, AI는 그 피드백을 Skills에 영구적으로 저장합니다.
핵심 포인트: Skills는 일반 규칙 집합에서 점차 당신만의 맞춤형 솔루션으로 변화합니다.
10 번 사용하면 당신의 습관의 80% 를 알게 됩니다. 50 번 사용하면 완전히 당신의 요구를 충족시킵니다.
사용할수록 Skills가 더 개인화되고 당신을 더 잘 이해하게 됩니다 —— 이것이 자체 업데이트의 힘입니다.
구체적인 작업
Step 1: Skills 다운로드
새 폴더를 여세요. 이 폴더를 앞으로 편집 작업을 위한 전용 공간으로 사용하면 더 편리합니다.
편집 Skills를 다운로드해 주세요:
- 주소: https://github.com/Ceeon/videocut-skills
- 저장 경로: .claude/skills/ (이 디렉토리에 직접 클론하고, 하위 폴더를 만들지 마세요)
그러면 자동으로 다운로드되며, 이 과정은 매우 빠릅니다.
그런 다음 다시 시작하면 이 skill들을 볼 수 있습니다.
Step 2: 환경 설치
/v 를 입력하고 videocut:install 을 선택하세요.
AI가 자동으로 종속성을 설치하고 모델을 다운로드합니다 (약 5 GB):
- FunASR: 말실수 인식용
- Whisper: 자막 생성용
이 두 모델은 각각 장점이 있습니다: FunASR은 단어 수준 편집(말실수, 간투사 인식)에 적합하고, Whisper는 자막 품질이 더 좋습니다.
Step 3: 토킹헤드 동영상 편집
/v 를 입력하고 videocut:edit talking-head 를 선택한 다음, AI에게 동영상 파일 경로를 알려주세요.
AI가 자동으로:
- 동영상 전사
- 말실수 식별 (문장별로 확인, 하나도 놓치지 않음)
- 간투사 식별 (음, 어, 에 등)
- 무음 식별 (≥1초)
- 검토 초안 생성
검토 초안에서 정지 기호(⏸️)는 삭제해야 할 무음 구간을 나타냅니다. 빨간 점 뒤의 물결선(🔴～～)은 반복 구간으로 삭제해야 함을 나타냅니다. 다른 형식을 원하면 AI에게 요구 사항에 맞는 형식으로 수정하도록 요청할 수 있습니다.
핵심: 검토 초안이 나오면 직접 살펴보세요. 마음에 들지 않는 점이 있으면 (예: '음을 더 많이 유지하고 싶다' 또는 '이 단어가 잘못 인식되었다'), 만족할 때까지 AI와 계속 소통하세요.
그런 다음 /v 를 입력하고 videocut:self-update 를 선택하면 AI가 이 조정 사항을 Skills에 기록합니다.
확인 후 편집이 자동으로 실행됩니다.
Step 4: 자막 추가
포인트: 사용자 정의 사전 = 자막 정확도 두 배
Skills에 사전 파일이 미리 설정되어 있습니다:
.claude/skills/videocut:subtitles/dictionary.txt
이 파일을 열면 미리 설정된 어휘를 볼 수 있습니다:
이 파일에 고유 명사만 추가하면 됩니다. 예를 들어, 회사 이름, 제품 이름, 채널 이름 등:
청펑의 채널
AI Product Freedom
My Brand Name
사전에 미리 기록해 두면 AI가 자막을 추가할 때 자동으로 사용자 사전을 사용하여 모델 오류를 수정합니다. 처음부터 정확합니다.
그런 다음 /v 를 입력하고 videocut:subtitles 를 선택하세요.
AI가 자동으로:
- Whisper 전사
- 사전을 사용한 오타 수정 (사용자 정의 사전 사용)
- 자막 파일 생성
- AI가 자막이 올바른지 확인 요청
- 확인 후 동영상에 자막 입히기
핵심: 나중에 사전에 빠진 것이 있으면 /v 로 videocut:self-update 를 선택하여 언제든지 보충할 수 있습니다.
네 단계로 완료, 완전 자동화.
요약
마지막으로, 결과는 CapCut에서 수동 편집한 결과와 거의 일치합니다!
토킹헤드 동영상을 자주 편집한다면 꼭 시도해 보시길 추천합니다. 자체 업데이트 메커니즘을 사용하는 것을 잊지 마세요. 그러면 Agent가 사용할수록 당신을 더 잘 이해하게 될 것입니다.
