AI가 화면을 보며 업무를 학습한다
2026년 7월 22일부로 Anthropic의 "Record a skill" 기능이 Claude Cowork에 추가되었다. Anthropic의 공식 발표에 따르면, 사용자는 업무 중 화면을 녹화하면서 자신이 수행 중인 작업을 설명할 수 있으며, Claude는 이를 재사용 가능한 스킬로 변환한다. 이 기능은 Claude 데스크톱 앱의 "+" 메뉴를 통해 Pro, Max, Team 요금제에서 사용할 수 있다.
첫째, Anthropic은 "화면을 녹화하면서 작업에 대해 설명하는 것"을 명시했다. 클릭과 입력이 표시되지만, 키로거처럼 원시 이벤트 데이터를 저장하는지, 아니면 비디오와 오디오를 분석하는지는 불분명하다. "Claude가 클릭과 타이핑을 분석하도록 하는 것"이라는 설명은 사용자에게는 일반적으로 정확하지만, 기술적 확정 사항으로 단정해서는 안 된다.
둘째, "추가 요금 없음"은 기존 구독에 포함된다는 의미다. Claude Cowork는 Pro, Max, Team 요금제의 일부이지만, Anthropic은 Cowork가 일반 채팅보다 사용량 한도를 더 빠르게 소모한다고 밝혔다. 따라서 "완전 무료"나 "무제한"이 아니다.
셋째, OpenAI와의 경쟁은 단순한 미래 예측이 아니다. 2026년 6월 18일, OpenAI는 macOS용 Codex의 기능으로 "Record & Replay"를 발표했으며, 거의 동일한 개념이다. 사용자가 워크플로우를 한 번 시연하면 재사용 가능한 스킬로 변환된다. OpenAI의 공개 발표는 Anthropic보다 약 한 달 앞서 있었다.
요약하자면: Anthropic은 Claude Cowork에 "Record a skill"을 추가했고, OpenAI의 ChatGPT Work/Codex에는 이미 "Record & Replay"가 있다. 경쟁 구도는 "프롬프트를 작성하는 대신 AI에게 작업 방식을 보여주는 것"으로 이동했다.
1. 이것은 "매크로"가 아니라, 업무의 의미를 학습하는 시스템이다
언뜻 보면 Record a skill은 구식 매크로 레코더나 RPA처럼 보인다. 전통적인 매크로는 "여기를 클릭" 또는 "3초 대기"와 같은 동작을 단순히 재생할 뿐이며, UI가 변경되면 작동이 중단된다.
반면, Claude와 Codex의 스킬은 다음을 포함하는 "AI 기능 패키지"다:
- 스킬을 사용해야 하는 시점
- 필요한 입력값
- 단계별 절차 및 의사 결정 로직
- 금지 사항 및 검증 방법
- 필요한 스크립트, 템플릿 및 도구
OpenAI는 Codex가 생성한 스킬에 사용 상황, 입력 요구 사항, 결과 검증이 포함된다고 설명한다. 재실행 시에는 새로운 값(파일, 날짜 등)만 제공하면 된다. 그러면 Codex가 Computer Use, 브라우저 작업, 플러그인을 사용하여 워크플로우를 실행한다.
2. Claude와 Codex의 차이점
유사하지만 몇 가지 주요 차이점이 있다:
- Claude Cowork: "+" 메뉴를 통해 "Record a skill" 사용. 리서치 및 문서 작성과 같은 지식 작업에 중점. Pro, Max, Team 요금제에서 사용 가능.
- ChatGPT Work/Codex: 플러그인을 통해 "Record & Replay" 사용. 일반 비즈니스 및 소프트웨어 개발에 중점. 초기에는 macOS 및 특정 지역(EEA/영국/스위스 제외)으로 제한.
3. "프롬프트를 작성하지 않는 것"이 중요한 이유
이전에는 자동화가 워크플로우를 텍스트로 설명할 수 있는 사람으로 제한되었다. 이제 전문가들은 작업 중에 이루어지는 직관적 판단인 "암묵적 지식"을 단순히 작업을 수행하면서 말하는 것만으로 외부화할 수 있다. Record a skill은 자신의 업무를 언어화하는 비용을 낮추고, AI가 초안을 생성하면 인간이 이를 다듬는 방식으로 작동한다.
4. 가장 큰 영향을 미치는 영역
자동화는 빈도가 높고 안정적이며 명확한 완료 기준이 있는 작업에 가장 효과적이다:
- 영업: 리서치부터 CRM 업데이트 및 후속 초안 작성까지.
- 회계: 보고서 다운로드, 데이터 조정, 예산 차이 분석.
- 마케팅: 게시 절차(제목, 썸네일, UTM 파라미터) 표준화.
- 고객 지원: 문의 분류 및 응답 초안 작성.
- 인사: 교차 시스템 신규 입사자 온보딩 작업.
- 데이터 분석: 데이터 검색부터 인사이트 요약까지의 경로 자동화.
- 개발/QA: 버그 재현, UI 차이 비교, 릴리스 노트 생성.
5. 좋은 스킬을 녹화하는 방법
- 스킬당 하나의 작업: 너무 광범위한 녹화는 피한다.
- 목적과 규칙을 먼저 명시: 시작하기 전에 AI에게 목표와 금지 사항을 알린다.
- "무엇"이 아닌 "왜"를 설명: 클릭 뒤에 숨은 이유를 음성으로 설명한다.
- 예외 상황 포함: 오류를 숨기지 말고 처리 방법을 AI에게 보여준다.
- 현실적인 테스트 데이터 사용: 민감한 정보는 피하되 복잡성은 유지한다.
- 결과 편집: AI가 생성한 스킬을 초안으로 간주한다.
- 실패 테스트: 데이터 누락이나 UI 변경 시 스킬이 어떻게 대응하는지 확인한다.
- 자동화는 마지막에: 예약 실행으로 전환하기 전에 수동 트리거로 시작한다.
6. 녹화 템플릿
녹화를 시작할 때 다음을 설명한다: "이 스킬의 목적은 [목표]입니다. [조건]이 발생했을 때 실행되어야 합니다. 입력값은 [데이터]입니다. 규칙은 [로직]을 포함합니다. 절대 [금지 사항]을 해서는 안 됩니다. [기준]이 충족되면 완료됩니다."
7. 기업 도입 시 위험 요소
- 기밀 유지: 화면 녹화에 알림이나 개인 데이터가 포함될 수 있다.
- 나쁜 습관의 표준화: 비효율적인 워크플로우가 "올바른" 방식으로 코드화될 수 있다.
- UI 변경: 시스템 레이아웃이 크게 변경되면 AI가 실패할 수 있다.
- 프롬프트 인젝션: 외부 데이터를 읽는 스킬이 악의적인 명령에 의해 조작될 수 있다.
- 스킬 비대화: 조직은 중복되거나 오래된 스킬을 관리하기 위한 거버넌스가 필요하다.
8. Claude 또는 Codex: 어떤 것을 사용할까?
- Claude Cowork: 여러 도구를 사용하며 문서 및 리서치를 처리하는 비기술 부서(영업, 인사, 마케팅)에 가장 적합.
- ChatGPT Work/Codex: CLI, IDE 및 스크립트를 활용하는 개발 통합 워크플로우에 가장 적합.
9. 30일 구현 로드맵
- 1주차: 빈도와 위험도에 기반하여 후보 작업 식별.
- 2주차: 3개의 파일럿 스킬(데이터, 문서, 다중 앱 유형) 녹화.
- 3주차: 테스트, 개선, 시간 절감 대비 오류율 측정.
- 4주차: 검증된 스킬을 팀과 공유하고 제한적 자동화로 전환.
10. 경쟁의 본질
기업에게 진정한 가치는 녹화 파일 자체가 아니라, 회사가 의사 결정을 내리고 업무를 완료하는 방식인 "조직 지식"이다. Record a skill과 Record & Replay는 개인의 전문성을 검증 가능하고 업데이트 가능한 조직 역량으로 전환하는 관문이다. 가장 큰 수혜자는 엔지니어가 아니라, 업무를 가장 잘 아는 도메인 전문가들이다.
