Ще в лютому змусити Codex будувати моделі LEGO вимагало спеціального навику, складних інструкцій і годин ітерацій. І результат все одно був не дуже. Я дійшов висновку, що моделі не дуже добре з цим справляються.
З GPT-6 Astra я надав їй доступ до BrickLink Studio та попросив створити міст «Золоті Ворота». Приблизно за десять хвилин я отримав першу версію, з маленькими машинками на дорозі. Після цього я продовжував її вдосконалювати.
Подібний досвід змусив мене переосмислити те, як я використовую Codex: яким додаткам я його надаю, наскільки детально я все описую та скільки міркувань потребує завдання. Ось п'ять речей, яких я навчився, працюючи з Astra.
1. Astra може використовувати всі ваші додатки (іноді навіть краще за вас) 2. Astra бере на себе більше продуктового мислення 3. Astra чудово працює з Blender 4. Astra не потребує Max, щоб вразити 5. Astra постійно перевіряє свою роботу
1. Astra може використовувати всі ваші додатки (іноді навіть краще за вас)
Повернімося до того LEGO-мосту. Я вже бачив, як Astra працює в інших додатках, тому захотів перевірити, як вона впорається з BrickLink Studio — додатком для проєктування цифрових моделей LEGO.
Я дав їй простий запит:
Запит: "Використай Studio, щоб побудувати міст 'Золоті Ворота' з LEGO"
Ось та перша версія:
Перший міст, відрендерений пізніше зі студійним освітленням.
Він навіть додав маленькі машинки.
Astra з'ясувала, які деталі доступні у вбудованій бібліотеці Studio, використала Python для збірки моделі, а потім відкрила її в Studio, щоб перевірити та доопрацювати.
Мене здивувало, наскільки природно вона поєднала код і додаток. Вона працює настільки швидко, що я починаю сумніватися, чи було б швидше виконати це завдання самостійно.
Це також змусило мене переглянути навички, які ми створили для попередніх моделей. Коли ми доручали Astra редагувати відео для запуску, деякі з наших старих навичок лише заважали. Більш проста конфігурація, без навичок редагування відео, працювала краще для цього завдання.
Якщо у вас є навик, створений для того, з чим старіша модель не могла впоратися, спробуйте виконати завдання без нього і подивіться, чи він вам все ще потрібен.
Використання комп'ютера також дозволяє Astra об'єднувати роботу між додатками. Вона може створити щось в одному місці, перевірити це в іншому та зібрати частини докупи. Надання їй такого доступу допомагає їй перевіряти власну роботу та виконувати більшу частину завдання.
Тож подумайте, який додаток ви б використали для роботи, і надайте Astra доступ до нього. Це може бути Bricklink Studio для LEGO, Blender для 3D, або DaVinci Resolve чи подібний редактор для відео. Їй не обов'язково виконувати всю відеороботу через FFmpeg, якщо є спеціалізований додаток, який може допомогти.
Порада: Надайте Astra додатки, які ви б використали для роботи, і спочатку спробуйте без додаткових навичок. Можливо, їй потрібно менше вказівок, ніж ви думаєте.
2. Astra бере на себе більше продуктового мислення
Для одного тесту я хотів створити Thumbnail Studio, щоб допомагати створювати креативні матеріали. Я зміг швидко накидати кілька ідей та послатися на розмови з колегою. Astra самостійно продумала багато детальних взаємодій, які ви очікуєте від редактора зображень у браузері, включаючи ⌘-Z та інші звичні комбінації, шари та можливість їх приховувати. Мені не довелося бути таким детальним, як раніше.
Запит, який я їй дав, і перша версія, яку вона створила.
Thumbnail Studio після подальших ітерацій.
Пізніше я попросив створити режим "Зворотний зв'язок щодо продукту" та автоматизацію для перевірки, ранжування та впровадження цього зворотного зв'язку. Мене здивувало, наскільки ретельно Astra продумала інтерфейс зворотного зв'язку. Я міг виділяти частини додатка, прикріплювати до них коментарі, встановлювати пріоритети, редагувати відгуки та позначати їх як виконані. Я не описував жодної з цих взаємодій детально.
Запит, який я їй дав, і створений нею режим зворотного зв'язку.
Я міг швидко поставити завдання для потрібної мені функції, і Astra самостійно продумувала, як має виглядати досвід. Це значно полегшує мені створення персоналізованого програмного забезпечення. Я можу реагувати на те, що вона створює, замість того, щоб планувати кожну взаємодію до початку роботи.
Анімації в моїй статті про WebMCP та в цій статті — ще один приклад. Мені сподобалася анімація Ніка Баумана в X, тому я надав Astra Appshot цієї анімації, статтю, яку я писав, і доступ до кодової бази додатка Codex. Appshot включав скріншот та контекст з додатка.
Codex прочитав статтю, зрозумів, про яку 3D-демонстрацію йдеться, і відтворив повноцінний 3D-інтерфейс, який міг анімувати. Він продумав композицію, кути камери та текст, що пояснював, що відбувається. Потім він створив невеликий інструмент попереднього перегляду, де я міг відтворювати, ставити на паузу, повторювати анімацію та переглядати її з різних кутів.
Я не просив цей інструмент попереднього перегляду, але він значно спростив ітерації. Я міг надавати детальний зворотний зв'язок, використовуючи інструмент "Анотації" у вбудованому браузері додатка.
Інструмент попереднього перегляду, перша анімація та версія, яку я опублікував.
У деяких випадках така поведінка може мати зворотний ефект. Якщо у вас є дуже конкретні уявлення, обов'язково чітко формулюйте свої очікування.
Я також витрачаю менше часу на підготовку всього, що потрібно моделі, перш ніж попросити її щось зробити. Щоб зробити порівняння вище, я попросив Astra переглянути стару розмову та відновити попередню версію анімації, знайти запис екрана десь на моєму робочому столі та отримати фінальну анімацію зі статті в X.
Вона знайшла всі частини та об'єднала їх у відео, і мені не довелося вказувати на кожен файл. Я міг описати бажаний результат і дозволити їй самій з'ясувати, як зібрати все докупи.
Коли я попросив сайт для демонстрації його моделей LEGO, я хотів, щоб люди могли переглядати їх у 3D та завантажувати файли для збірки. Astra також додала інтерфейс для завантаження додаткових моделей. Вона захистила цей інтерфейс за допомогою "Увійти через ChatGPT", щоб лише я міг ним користуватися як адміністратор.
Мені все ще потрібно знати, чого я хочу, і дати Astra напрямок, щоб отримати максимум. Для демонстраційного сайту я надав більше прикладів і попросив створити інтерактивні планети, що обертаються, щоб отримати космічну тему, яку я мав на увазі. Але мені не потрібно бути педантичним щодо кожної функції. Чим кращі приклади я їй даю, тим більше Astra дивує мене тим, наскільки ретельно вона продумує досвід.
Порада: Вам не потрібно описувати кожну взаємодію заздалегідь. Дайте Astra ідею та кілька хороших прикладів. Якщо ви хочете, щоб вона діяла вузько, чітко сформулюйте вимоги, а потім доопрацьовуйте створений нею досвід.
3. Astra чудово працює з Blender
Нашу команду вже вразили 3D-досвіди, які Astra могла створювати за допомогою Three.js або навіть чистого WebGL. Але особливо виділялося те, наскільки добре вона могла використовувати Blender, як через використання комп'ютера, так і через командний рядок. Навіть коли кінцевий результат має бути в браузері, я виявив, що корисно дозволяти Astra створювати його частини в Blender.
Щоб перевірити це, я дав їй десять швидких фотографій домашнього бару та попросив відтворити кімнату в Blender. Я не давав жодних вимірів.
Astra була дуже ретельною щодо пропорцій. Вона знайшла на фото референтні об'єкти, наприклад, книги про коктейлі, і використала їх для оцінки масштабу. Вона моделювала окремі об'єкти, перевіряла їх окремо, розміщувала в сцені та продовжувала ітерувати. Вона побудувала кімнату, меблі, полиці, пляшки та склянки. Вона навіть точно відтворила стілець у кутку та випадкові дроти в кімнаті.
Наявність окремих об'єктів у Blender дозволило їй перевіряти та доопрацьовувати кожну частину сцени. Я продовжував ітерувати матеріали та освітлення, і міг відкрити сцену та оглянути її з різних кутів.
Домашній бар, відтворений у Blender з десяти фотографій.
Порада: Якщо ви працюєте над проєктом з 3D, попросіть Astra використати Blender для кращих результатів.
4. Astra не потребує Max, щоб вразити
Те, наскільки далеко я можу просунутися з легким/низьким рівнем міркувань, стало одним із найбільших сюрпризів. З кожним новим поколінням моделей виникає велика спокуса спробувати використати найвищий рівень міркувань. Особливо, якщо ви використовували його раніше.
У моїх експериментах з Blender результати Astra на низькому рівні міркувань подобалися мені більше, ніж результати Sol на максимальному. Astra також дуже ретельно перевіряє свою роботу незалежно від рівня міркувань, що робить низький рівень неймовірно потужним.
Мої експерименти з Blender: Sol зверху та Astra знизу, від низького до максимального рівня міркувань.
Якщо ви використовували Sol на високому рівні міркувань, не думайте, що вам потрібно одразу перемикати Astra на максимальний. Спробуйте спочатку щось середнє, а потім експериментуйте в обох напрямках і дивіться, що працює для вашого завдання. Якщо вам потрібно більше прикладів для порівняння, завітайте до нашої Обсерваторії моделей.
Порада: Почніть з легкого/низького або середнього рівня міркувань. Подивіться на результат, перш ніж вирішувати, що вам потрібно більше міркувань.
5. Astra постійно перевіряє свою роботу
Astra, як правило, перевіряє, чи дійсно вона виконала завдання. Якщо ви створюєте гру, вона може почати її тестувати. Попросіть її оптимізувати щось, і вона може налаштувати середовище, щоб виміряти, чи спрацювала оптимізація. Для відео вона може перевіряти окремі кадри або навіть звукові хвилі, щоб переконатися в тому, що робить.
Коли я доручив Astra працювати над титульним зображенням для цієї статті, вона використала браузер, щоб перевірити код живої сторінки статті в X та підтвердити вимоги до зображення заголовка. Вона визначила співвідношення сторін 5:2 та розмір обкладинки 1200 × 480.
Вона перевірила код живої сторінки, перш ніж підтвердити формат заголовка.
Це може бути корисно, але мені потрібно чітко розуміти, наскільки далеко я хочу, щоб вона заходила. Якщо ви хочете отримати прототип, який будете тестувати самостійно, скажіть про це. Якщо ви хочете, щоб вона пройшла гру та виправила те, що знайде, скажіть і це. Для фінальної перевірки ви можете попросити її зробити один прохід за тими параметрами, які вас цікавлять, а потім повідомити, що вона знайшла та що залишилося невирішеним.
Порада: Скажіть Astra, яким має бути кінцевий результат, що ви хочете, щоб вона перевірила, і коли вона повинна повернути роботу вам.
Спробуйте завдання, від якого ви відмовилися
Я витратив години, намагаючись змусити Codex будувати моделі LEGO, і дійшов висновку, що він не дуже добре з цим справляється. З Astra я отримав першу версію мосту приблизно за десять хвилин.
Дайте їй додатки, які ви б використали для роботи, і кілька хороших прикладів. Почніть з легкого або середнього рівня міркувань. Скажіть їй, яким має бути кінцевий результат і що ви хочете, щоб вона перевірила, а потім подивіться, наскільки далеко вона просунеться, перш ніж додавати більше вказівок.
Якщо у вас є завдання, яке ви пробували виконати зі старішою моделлю і відмовилися від нього, спробуйте ще раз з Astra.
