Diese Woche habe ich Opus 5.5 + Tripo + Blender genutzt, um die interstellare Reise aus „Der kleine Prinz“ in ein 3D-Spiel zu verwandeln, das Nutzer selbst erkunden können. Nach der Veröffentlichung hat es im gesamten Netz fast 3 Millionen Aufrufe gesammelt.
https://x.com/Saccc_c/status/2109962425512734739
Viele Freunde waren begeistert von diesem Spiel. Vom Szenenaufbau und der Charaktererstellung bis hin zur Codeentwicklung und Fehlersuche wurde die Hauptproduktionsarbeit von KI übernommen.
Deshalb habe ich mich entschieden, den Produktionsprozess zu teilen – mit echten Beispielen und nachnutzbaren Prompts –, um dich Schritt für Schritt in die KI-gestützte 3D-Spieleentwicklung einzuführen, damit auch du anfangen kannst, deine eigenen erdachten Welten zu erschaffen.
Dieser Artikel ist in drei Teile gegliedert:
- Workflow und Vorbereitung der Spieleentwicklung
- Szenenaufbau
- Charaktererstellung
1. Workflow und Vorbereitung der Spieleentwicklung
Workflow der Spieleentwicklung: Fable 5.1 übernimmt die PRD-Erstellung und strukturiert Kernszenen, Charaktere und Handlungsstränge + Image 2.5 generiert Szenen- und Charakterbilder + Tripo erzeugt die zentralen 3D-Assets + Opus 5.5 erstellt den Kerncode + Astra iteriert Optimierungen und Bugfixes.
Konfiguration der Game-Tools:
- Blender: Lade die Blender CLI herunter, um die von Tripo generierten 3D-Modelle zu optimieren und das gesamte 3D-Modelling abzuschließen; installiere das kostenpflichtige Auto-Rig Pro Plugin für das Rigging und Skinning von Charakteren, was die Erstellung animierter Interaktionen erleichtert.
- Unity: Installiere die Unity App (https://unity.com/) als Game Engine, um Szenen, Charaktere und interaktive Effekte zu einem vollständigen Spiel zusammenzufügen; installiere die Unity CLI und füge das Pipeline-Paket im Projekt hinzu, damit Claude über das offizielle Unity MCP direkt mit Unity-Projekten arbeiten kann.
Im Folgenden konzentriert sich dieser Artikel auf den Szenenaufbau und die Charaktererstellung.
2. Szenenaufbau
Kurz gesagt: Image 2.5 generiert Szenenbilder — 3D-Assets zerlegen und in Tripo erzeugen — Opus 5.5 steuert Blender+Unity für das Szenenmodellieren.
Die detaillierten Schritte sind folgende 👇:
(1) Nutze GPT Image 2.5, um Referenzbilder für die Szene zu generieren und Ideen in klare Visuals zu verwandeln.
Basierend auf den zuvor strukturierten Spielanforderungen nutzt du Image 2.5, um Szenenreferenzbilder zu erstellen und dabei den allgemeinen Art Style, das Farbschema sowie die Positionen der Hauptobjekte festzulegen.
Es empfiehlt sich, zuerst ein zufriedenstellendes Bild des gewünschten Szeneneffekts zu bestimmen und dann weitere Perspektiven darum herum zu ergänzen (besonders bei Innen- und Außenszenen). Die Draufsicht verdeutlicht vor allem das Szenenlayout, während die schräge Seitenansicht Objekthöhe, Form und hierarchische Beziehungen ergänzt. Du kannst auch direkt eine Gesamtansicht wie unten generieren:
Nachnutzbarer Referenz-Prompt:
Erstelle basierend auf dem hochgeladenen Szenenreferenzbild ein umfassendes Referenzbild dieser Szene, inklusive Mehrfachperspektiven der gesamten Umgebung und Darstellungen lokaler Details.
(2) Lass die KI die Szenen-Assets zerlegen und filtere die Modelle heraus, die separat in Tripo generiert werden müssen.
Sobald die Referenzbilder fertig sind, kannst du die KI direkt beurteilen lassen, welche Assets der Szene separat in Tripo generiert werden müssen und welche von Opus 5.5 in Blender/Unity aufgebaut werden können.
Referenz-Prompt:
Ich arbeite jetzt an der Spieleentwicklung, mein Tech-Stack ist Tripo + Blender + Unity. Analysiere anhand der oben generierten Szenenreferenzbilder tiefgehend, welche Assets sich für die Generierung mit Tripo eignen und welche direkt mit Blender konstruiert werden sollten. Markiere die Assets, die von Tripo generiert werden müssen, im Bild, damit ich sie bestätigen kann.
Für die Erstellung von 3D-Assets für Szenenrequisiten in Tripo empfehle ich das H3.1-Modell, da es hochpräzise Details der Assets sicherstellt.
(3) Nutze professionelle Prompts, damit Opus 5.5 Blender und Unity steuern und mit dem Modellieren beginnen kann. Der Schlüssel zum Modellieren liegt darin, detaillierte Referenzbilder bereitzustellen und aus mehreren Kameraperspektiven zu iterieren.
Nachdem du die 3D-Requisiten, die in Tripo separat erstellt werden müssen, generiert und exportiert hast, übergibst du diese Assets und die Szenenreferenzbilder aus Schritt eins an Opus 5.5. Lass es Blender + Unity steuern, um die Gesamtszene aufzubauen, Requisiten gemäß den Referenzbildern zu platzieren sowie Proportionen und Positionen anzupassen.
Überprüfe die Szene anschließend aus verschiedenen Blickwinkeln wie von vorne und von der Seite und nutze Screenshot-Feedback, um Layout und Details schrittweise anzupassen.
Der Referenz-Prompt lautet wie folgt:
Führe basierend auf den hochgeladenen Mehransichts-Referenzbildern der Innen- und Außenszenen sowie den generierten Tripo 3D-Assets eine perfekte Replikation der Referenzbilder durch. Zu den Anforderungen gehört es, dieselbe beeindruckende Textur und Detailtreue wie in den Referenzbildern zu erreichen. Setze nach der Umsetzung einen unabhängigen Review-Agenten ein, der Blind-Audits der Szene aus mehreren Kamerapositionen durchführt. Werden Abweichungen von den Referenzbildern festgestellt, iteriere und verbessere kontinuierlich.
3. Charaktermodellierung
Image 2.5 generiert Charakterbilder — 3D-Charaktermodelle in Tripo erzeugen — Rigging und Skinning mit dem Auto-Rig Pro Plugin von Blender — Mixamo-Animationen integrieren — Sekundäre Anpassungen für komplexe Interaktionen in Blender (optional).
Hier nehmen wir das Design des kleinen Prinzen als Beispiel für eine konkrete Erklärung.
(1) Nutze Image 2.5, um Mehransichts-Referenzbilder des Charakters zu generieren.
Basierend auf dem Charakterbild und den Settings nutzt du zunächst Image 2.5, um eine Vier-Ansichten-Zeichnung des kleinen Prinzen in T-Pose zu erstellen, wobei die Charakterdetails in allen Ansichten einheitlich sein müssen.
(2) Nutze das Smart Mesh P2.0 Modell von Tripo, um 3D-Charakter-Assets zu generieren.
Smart Mesh P2.0 ist ein 3D-Generierungsmodell, das speziell für Spiele und interaktive Inhalte entwickelt wurde. Seine Besonderheit ist die Erzeugung einer kontrollierbaren Polygonanzahl und editierbarer Charakterstrukturen, was das spätere Rigging und die Animationsproduktion erleichtert.
Wähle in Tripo „Multi-view to 3D Generation“ und lade die vier Ansichten nacheinander hoch. Die Standardtopologie ist viereckig, die Präzision kann auf Maximum gesetzt werden; wähle das P2.0-Modell und starte die Generierung.
Wenn das anfänglich generierte weiße Mesh-Gitter sauber und fehlerfrei ist, klicke auf „Texture“, um Modelltexturen zu erzeugen; falls die Mesh-Form unpassend ist, wähle „edit mesh“ für eine teilweise Neugenerierung.
(3) Nutze das Auto-Rig Pro Plugin in Blender, um den Charakter automatisch zu riggen und zu skinnen.
Nach der Konfiguration des Plugins lädst du das Charaktermodell direkt in Claude hoch und gibst den folgenden Prompt ein, den ich wiederholt getestet und zusammengefasst habe, für effizientes Rigging und Skinning 👇:
Nutze Auto-Rig Pro, um Rigging und Skinning für den Charakter abzuschließen, und stelle sicher, dass die Knochenpositionen mit den Gelenken des Charakters übereinstimmen. Teste danach grundlegende Bewegungen wie Arme heben, Beine beugen und sich umdrehen, prüfe und korrigiere offensichtliche Deformationen, Verzerrungen und Clipping-Probleme.
(4) Lade die benötigten Bewegungsdateien für den Charakter von Mixamo herunter und lass Opus 5.5 sie an das entsprechende Charakterskelett anpassen.
Gehe entsprechend den Spielvorgaben zu mixamo (https://www.mixamo.com/), suche per Stichwort nach den Bewegungen, die der kleine Prinz benötigt, und lade die entsprechenden FBX-Bewegungsdateien herunter.
Anschließend können wir Opus prüfen lassen, ob die jeweiligen Bewegungen zum tatsächlichen Skelett des kleinen Prinzen passen, und die Integration abschließen.
(5) Passe spezielle Bewegungen und Kontaktdetails in Blender an (erforderlich für komplexe interaktive Bewegungen).
Bei komplexen Interaktionen mit Kontakt zwischen Charakter und Requisiten, wie „kleiner Prinz trägt einen Kessel“, bietet Mixamo oft keine perfekt passenden Bewegungen. Wir können zunächst eine ähnliche Basisbewegung auswählen und dann Opus 5.5 die Details in Blender iterativ anpassen lassen.
Der Referenz-Prompt lautet wie folgt:
Bitte orientiere dich an der bereitgestellten Mixamo-Bewegung, behalte die anwendbaren Teile bei und nutze die Arm-IK-Controller von Auto-Rig Pro, um die Armhaltungen anzupassen. Koordiniere den Fingergriff und Detailkorrekturen der Kesselposition, um die Kessel-Trage-Bewegung abzuschließen. Stelle einen stabilen Kontakt zwischen Handfläche und Griff sowie einen natürlichen Hebevorgang sicher und vermeide Clipping, das Lösen des Griffs oder schwebende Kessel.
Nächste Woche werde ich den gesamten Spielcode und noch vollständigere Produktionsdetails auf GitHub open-sourcen. Alle sind herzlich eingeladen, dran zu bleiben!
ps. Wenn du ebenfalls eigene 3D-Kreationen mit Tripo ausprobieren möchtest, kannst du dich über meinen Link registrieren und kostenlos 500 Credits erhalten: https://studio.tripo3d.ai/home?invite_code=H2DB1X&utm_source=X&utm_medium=kol&utm_campaign=kol_Saccc
