지난 2월, Codex 로 LEGO 모델을 만드는 것은 커스텀 스킬, 복잡한 지침, 그리고 몇 시간의 반복 작업이 필요했습니다. 게다가 결과도 훌륭하지 않았습니다. 저는 모델이 이런 작업에 적합하지 않다고 생각하게 되었습니다.
GPT-6 Astra 에서는 BrickLink Studio 에 접근 권한을 주고 금문교를 요청했습니다. 약 10분 후, 도로 위에 작은 자동차까지 완성된 첫 번째 버전을 얻을 수 있었습니다. 이후에도 계속 개선해 나갔습니다.
이런 경험들은 제가 Codex 를 사용하는 방식, 즉 어떤 앱에 접근 권한을 줄지, 얼마나 구체적으로 지정할지, 작업에 얼마나 많은 추론이 필요한지에 대해 다시 생각하게 만들었습니다. Astra 를 사용하면서 배운 다섯 가지는 다음과 같습니다.
1. Astra 는 모든 앱을 사용할 수 있습니다 (때로는 여러분보다 더 잘 사용합니다) 2. Astra 는 제품 기획을 더 많이 수행합니다 3. Astra 는 Blender 에서 뛰어납니다 4. Astra 는 Max 가 없어도 인상적입니다 5. Astra 는 지속적으로 작업을 확인합니다
1. Astra 는 모든 앱을 사용할 수 있습니다 (때로는 여러분보다 더 잘 사용합니다)
LEGO 다리 이야기로 돌아가 보겠습니다. 저는 이미 Astra 가 다른 앱에서 작동하는 것을 보았기 때문에, 디지털 LEGO 모델을 디자인하는 앱인 BrickLink Studio 를 어떻게 다룰지 궁금했습니다.
간단한 요청을 했습니다:
프롬프트: "Studio 를 사용하여 LEGO 로 금문교를 만드세요"
첫 번째 버전은 이렇습니다:
첫 번째 다리, 이후 스튜디오 조명으로 렌더링된 모습입니다.
작은 자동차까지 추가했습니다.
Astra 는 Studio 의 번들 라이브러리에서 사용 가능한 부품이 무엇인지 파악하고, Python 을 사용하여 모델을 조립한 다음, Studio 에서 열어 검사하고 반복 작업을 수행했습니다.
놀라웠던 점은 코드와 앱을 얼마나 자연스럽게 결합했는지였습니다. 속도가 너무 빨라서 직접 작업하는 것이 더 빠를지 의문이 들기 시작했습니다.
또한 이전 모델을 위해 구축했던 스킬들을 다시 살펴보게 되었습니다. 출시를 위해 Astra 가 비디오를 편집하도록 할 때, 일부 기존 스킬이 오히려 방해가 되었습니다. 비디오 편집 스킬이 없는, 더 기본적인 설정이 해당 작업에 더 잘 맞았습니다.
이전 모델이 할 수 없었던 작업을 위해 스킬을 구축했다면, 해당 스킬 없이 작업을 시도해보고 여전히 필요한지 확인해보세요.
컴퓨터 사용 기능을 통해 Astra 는 여러 앱 간의 작업을 연결할 수도 있습니다. 한 곳에서 무언가를 만들고, 다른 곳에서 검사한 다음, 조각들을 모을 수 있습니다. 이러한 접근 권한을 부여함으로써 Astra 가 자신의 작업을 검증하고 더 많은 작업을 완료하는 데 도움이 되었습니다.
따라서 해당 작업에 사용할 앱을 생각해보고 Astra 에게 접근 권한을 부여하세요. LEGO 작업에는 Bricklink Studio, 3D 작업에는 Blender, 비디오 작업에는 DaVinci Resolve 또는 유사한 편집기가 될 수 있습니다. 전용 앱이 도움이 될 수 있다면 모든 비디오 작업을 FFmpeg 를 통해 처리할 필요는 없습니다.
팁: 작업에 사용할 앱을 Astra 에게 제공하고, 먼저 추가 스킬 없이 시도해보세요. 생각보다 지침이 많이 필요하지 않을 수 있습니다.
2. Astra 는 제품 기획을 더 많이 수행합니다
한 가지 테스트로, 창의적인 에셋 제작을 돕는 Thumbnail Studio 를 만들고 싶었습니다. 몇 가지 아이디어를 빠르게 떠올리고 동료와 나눴던 대화를 참조할 수 있었습니다. Astra 는 브라우저 기반 이미지 편집기에서 기대할 수 있는 세부적인 상호작용(⌘-Z 및 기타 익숙한 단축키, 레이어, 레이어 숨기기 기능 등)을 많이 구현했습니다. 이전처럼 구체적으로 지시할 필요가 없었습니다.
제가 준 프롬프트와 Astra 가 처음 만든 버전입니다.
더 많은 반복 작업 후의 Thumbnail Studio 입니다.
이후 제품 피드백 모드와 피드백을 확인, 순위 지정, 구현하는 자동화를 요청했습니다. 놀라웠던 점은 Astra 가 피드백 인터페이스를 얼마나 철저하게 고려했는지였습니다. 앱의 특정 부분을 강조하고, 거기에 댓글을 고정하고, 우선순위를 설정하고, 피드백을 편집하고, 해결됨으로 표시할 수 있었습니다. 저는 이러한 상호작용을 하나도 자세히 설명하지 않았습니다.
제가 준 프롬프트와 Astra 가 만든 피드백 모드입니다.
원하는 기능에 대한 작업을 빠르게 지시할 수 있었고, Astra 는 경험이 어떤 모습이어야 하는지 스스로 고민했습니다. 이 덕분에 개인화된 소프트웨어를 훨씬 쉽게 구축할 수 있게 되었습니다. 모든 상호작용을 미리 계획하는 대신, Astra 가 만든 결과에 반응하며 개선할 수 있습니다.
WebMCP 아티클과 이 아티클의 애니메이션이 또 다른 예시입니다. Nick Baumann 의 X 애니메이션이 마음에 들어서, Astra 에게 해당 애니메이션의 Appshot, 제가 작성 중인 아티클, 그리고 Codex 앱 코드베이스에 대한 접근 권한을 주었습니다. Appshot 에는 스크린샷과 앱의 컨텍스트가 포함되었습니다.
Codex 는 아티클을 읽고, 제가 언급한 3D 데모를 이해하고, 애니메이션을 적용할 수 있는 완전한 3D 인터페이스를 재현했습니다. 구도, 카메라 각도, 그리고 진행 상황을 설명하는 텍스트까지 고려했습니다. 그런 다음 애니메이션을 재생, 일시 정지, 반복하고 다양한 각도에서 볼 수 있는 작은 미리보기 도구를 만들어 주었습니다.
저는 그런 미리보기 도구를 요청하지 않았지만, 덕분에 반복 작업이 훨씬 쉬워졌습니다. 앱 내 브라우저의 Annotations 도구를 사용하여 세부적인 피드백을 줄 수 있었습니다.
미리보기 도구, 첫 번째 애니메이션, 그리고 제가 게시한 버전입니다.
어떤 경우에는 이러한 동작이 역효과를 낼 수도 있습니다. 매우 구체적인 목표가 있다면 기대치를 명확하게 지시해야 합니다.
또한 모델에게 작업을 요청하기 전에 필요한 모든 것을 준비하는 데 시간을 덜 쓰고 있습니다. 위의 비교를 위해, Astra 에게 이전 대화에서 이전 버전의 애니메이션을 찾고, 데스크탑 어딘가에서 화면 녹화를 찾고, X 아티클에서 최종 애니메이션을 가져오도록 요청했습니다.
Astra 는 조각들을 찾아서 하나의 비디오로 결합했으며, 제가 모든 파일을 일일이 가리킬 필요가 없었습니다. 원하는 결과를 설명하면 Astra 가 모든 것을 어떻게 모을지 스스로 파악했습니다.
LEGO 모델을 전시할 사이트를 요청했을 때, 사람들이 3D로 둘러보고 빌드 파일을 다운로드할 수 있기를 원했습니다. Astra 는 또한 더 많은 모델을 업로드할 수 있는 인터페이스를 추가했습니다. 해당 인터페이스는 Sign in with ChatGPT 로 보호하여 관리자인 저만 사용할 수 있도록 했습니다.
Astra 를 최대한 활용하려면 여전히 원하는 바를 알고 방향을 제시해야 합니다. 전시 사이트의 경우, 더 많은 예시를 제공하고 우주 테마를 위해 상호작용 가능한 회전하는 행성을 요청했습니다. 하지만 모든 기능에 대해 지나치게 세세하게 설명할 필요는 없습니다. 제가 제공하는 참고 자료가 좋을수록, Astra 는 경험을 얼마나 세심하게 고려하는지에 대해 더 놀라움을 줍니다.
팁: 모든 상호작용을 처음부터 자세히 설명할 필요는 없습니다. Astra 에게 아이디어와 몇 가지 좋은 참고 자료를 제공하세요. 좁은 범위로 작업하게 하려면 요구 사항을 알려주고, 그런 다음 Astra 가 구축한 경험을 다듬으면 됩니다.
3. Astra 는 Blender 에서 뛰어납니다
저희 팀은 이미 Astra 가 Three.js 나 심지어 raw WebGL 로 구축할 수 있는 3D 경험에 깊은 인상을 받았습니다. 하지만 특히 눈에 띄었던 점은 컴퓨터 사용과 명령줄을 통해 Blender 를 얼마나 잘 사용할 수 있는지였습니다. 최종 결과물이 브라우저에 있어야 하는 경우에도, Astra 가 Blender 에서 일부를 구축하도록 하는 것이 유용하다는 것을 알게 되었습니다.
이를 테스트하기 위해, 홈 바의 사진 10장을 빠르게 제공하고 Blender 에서 방을 재구축하도록 요청했습니다. 어떤 측정값도 제공하지 않았습니다.
Astra 는 비율에 매우 꼼꼼했습니다. 사진에서 칵테일 책과 같은 참조 객체를 찾아 규모를 추정하는 데 사용했습니다. 개별 객체를 모델링하고, 별도로 확인한 다음, 장면에 배치하고 계속 반복했습니다. 방, 가구, 선반, 병, 유리잔을 구축했습니다. 구석에 있는 의자와 방 안의 무작위 전선까지 완벽하게 구현했습니다.
Blender 에 개별 객체가 있으면 장면의 각 부분을 검사하고 다듬을 수 있었습니다. 재질과 조명을 계속 반복했고, 장면을 열고 다양한 각도에서 둘러볼 수 있었습니다.
열 장의 사진으로 Blender 에서 재구축된 홈 바입니다.
팁: 3D 프로젝트를 작업 중이라면 더 나은 결과를 위해 Astra 에게 Blender 를 사용하도록 요청하세요.
4. Astra 는 Max 가 없어도 인상적입니다
Light/Low 추론으로 얼마나 많은 것을 얻을 수 있는지는 가장 큰 놀라움 중 하나였습니다. 새로운 모델 세대가 나올 때마다 가장 높은 수준의 추론을 사용하려는 유혹이 큽니다. 특히 이전에 그렇게 사용해왔다면 더욱 그렇습니다.
Blender 실험에서, 저는 Low 추론에서 Sol 의 Max 추론 결과보다 더 선호하는 Astra 의 결과를 얻었습니다. Astra 는 또한 추론 수준에 관계없이 작업을 확인하는 데 매우 신중하여, Low 추론을 엄청나게 강력하게 만듭니다.
위는 Sol, 아래는 Astra 의 Low 부터 Max 까지의 Blender 실험 결과입니다.
높은 추론 수준으로 Sol 을 사용해왔다면, Astra 도 마찬가지로 높여야 한다고 가정하지 마세요. Medium 과 같은 수준부터 시작하여 양방향으로 실험해보고 작업에 가장 적합한 것을 찾아보세요. 더 많은 비교에 대한 영감이 필요하다면 Model Observatory를 확인해보세요.
팁: Light/Low 또는 Medium 추론부터 시작하세요. 더 많은 추론이 필요하다고 판단하기 전에 결과를 먼저 확인하세요.
5. Astra 는 지속적으로 작업을 확인합니다
Astra 는 작업을 실제로 완료했는지 확인하는 경향이 있습니다. 게임을 만들고 있다면 플레이테스트를 시작할 수도 있습니다. 최적화를 요청하면 최적화가 작동했는지 측정할 환경을 설정할 수도 있습니다. 비디오의 경우, 개별 프레임이나 사운드 파형까지 검사하여 작업 내용을 확인할 수 있습니다.
이 아티클의 제목 이미지를 작업하도록 했을 때, Astra 는 브라우저 사용을 통해 X 의 라이브 아티클 페이지 뒤의 코드를 확인하고 헤더 이미지 요구 사항을 확인했습니다. 5:2 화면비와 1200 × 480 커버를 찾아냈습니다.
헤더 형식을 확인하기 전에 라이브 페이지의 코드를 확인했습니다.
이는 유용할 수 있지만, 어느 정도까지 진행되길 원하는지 명확히 해야 합니다. 직접 플레이테스트할 프로토타입을 원한다면 그렇게 말하세요. 게임을 플레이하고 발견한 문제를 수정하길 원한다면 그것도 말하세요. 최종 확인을 위해, 원하는 검사를 한 번 수행하고 발견한 사항과 아직 해결되지 않은 문제를 보고하도록 요청할 수 있습니다.
팁: Astra 에게 완료된 결과물이 무엇인지, 무엇을 확인하길 원하는지, 그리고 언제 작업을 다시 넘겨야 하는지 알려주세요.
포기했던 작업을 다시 시도해보세요
저는 Codex 로 LEGO 모델을 만들기 위해 몇 시간을 보냈지만, 그다지 능숙하지 않다고 생각하게 되었습니다. Astra 를 사용해서는 약 10분 만에 다리의 첫 번째 버전을 얻을 수 있었습니다.
작업에 사용할 앱과 몇 가지 좋은 참고 자료를 제공하세요. Light 또는 Medium 추론부터 시작하세요. 완료된 결과물이 무엇인지, 무엇을 확인하길 원하는지 알려주고, 더 많은 지침을 추가하기 전에 Astra 가 어디까지 할 수 있는지 확인해보세요.
이전 모델로 시도했다가 포기한 작업이 있다면, Astra 와 함께 다시 시도해보세요.
