इस हफ्ते, मैंने Opus 5.5 + Tripo + Blender का इस्तेमाल करके "द लिटिल प्रिंस" की अंतरतारकीय यात्रा को एक 3D गेम में बदल दिया, जिसे यूज़र्स खुद एक्सप्लोर कर सकते हैं। रिलीज़ होने के बाद, इसने पूरे इंटरनेट पर लगभग 30 लाख व्यूज़ बटोरे।
https://x.com/Saccc_c/status/2109962425512734739
कई दोस्तों को यह गेम बहुत पसंद आया। सीन बनाने और कैरेक्टर डिज़ाइन करने से लेकर कोड डेवलपमेंट और डीबगिंग तक, मुख्य प्रोडक्शन वर्क AI ने ही संभाला।
इसलिए, मैंने असली उदाहरणों और रेफरेंस के लिए तैयार प्रॉम्प्ट्स के साथ इस प्रोडक्शन प्रोसेस को शेयर करने का फैसला किया, ताकि आपको स्टेप-बाय-स्टेप AI 3D गेम क्रिएशन की दुनिया में ले जा सकूं और आप भी अपनी कल्पनाओं की दुनिया बनाना शुरू कर सकें।
इस आर्टिकल को तीन हिस्सों में बांटा गया है:
- गेम डेवलपमेंट वर्कफ़्लो और तैयारी
- सीन कंस्ट्रक्शन
- कैरेक्टर कंस्ट्रक्शन
1. गेम डेवलपमेंट वर्कफ़्लो और तैयारी
गेम डेवलपमेंट वर्कफ़्लो: Fable 5.1 PRD बनाने, मुख्य सीन्स, कैरेक्टर्स और स्टोरीलाइन को व्यवस्थित करने का काम करता है + Image 2.5 सीन और कैरेक्टर इमेजेस जनरेट करता है + Tripo मुख्य 3D एसेट्स बनाता है + Opus 5.5 मुख्य कोड तैयार करता है + Astra ऑप्टिमाइज़ेशन और बग फिक्सिंग को बेहतर बनाता है।
गेम टूल कॉन्फ़िगरेशन:
- Blender: Tripo द्वारा जनरेट किए गए 3D मॉडल्स को ऑप्टिमाइज़ करने और ओवरऑल 3D मॉडलिंग पूरी करने के लिए Blender CLI डाउनलोड करें; कैरेक्टर रिगिंग और स्किनिंग के लिए पेड Auto-Rig Pro प्लगइन इंस्टॉल करें, जिससे एनिमेशन इंटरैक्शन बनाना आसान हो जाए।
- Unity: Unity ऐप इंस्टॉल करें (https://unity.com/) जिसे गेम इंजन के रूप में इस्तेमाल करके सीन्स, कैरेक्टर्स और इंटरैक्टिव इफ़ेक्ट्स को एक पूरे गेम में पैक किया जा सके; Unity CLI इंस्टॉल करें और प्रोजेक्ट में Pipeline पैकेज जोड़ें ताकि Claude आधिकारिक Unity MCP के ज़रिए सीधे Unity प्रोजेक्ट्स को ऑपरेट कर सके।
आगे, इस आर्टिकल में हम सीन कंस्ट्रक्शन और कैरेक्टर क्रिएशन पर विस्तार से बात करेंगे।
2. सीन कंस्ट्रक्शन
सरल शब्दों में कहें तो: Image 2.5 सीन इमेजेस जनरेट करता है — 3D एसेट्स को अलग-अलग हिस्सों में बांटकर Tripo में जनरेट करें — Opus 5.5 सीन मॉडलिंग के लिए Blender+Unity को ऑपरेट करता है।
विस्तृत स्टेप्स इस प्रकार हैं 👇:
(1) GPT Image 2.5 का इस्तेमाल करके सीन की रेफरेंस इमेजेस बनाएं, ताकि आपके आइडियाज़ साफ़ विज़ुअल्स में बदल जाएं।
पहले से तय किए गए गेम रिक्वायरमेंट्स के आधार पर, Image 2.5 का इस्तेमाल करके सीन की रेफरेंस इमेजेस बनाएं, जिससे ओवरऑल आर्ट स्टाइल, कलर स्कीम और मुख्य ऑब्जेक्ट्स की पोज़िशन तय हो सके।
सलाह दी जाती है कि पहले एक अच्छी सीन इफ़ेक्ट इमेज फ़ाइनल करें, फिर उसके चारों तरफ़ दूसरे एंगल्स (खासकर इनडोर और आउटडोर सीन्स के लिए) जोड़ें। टॉप-डाउन व्यू मुख्य रूप से सीन का लेआउट दिखाता है, जबकि तिरछा साइड व्यू ऑब्जेक्ट की ऊंचाई, आकार और उनके बीच के संबंधों को समझाता है। आप नीचे दिए गए उदाहरण की तरह सीधे एक ओवरऑल व्यू भी जनरेट कर सकते हैं:
बार-बार इस्तेमाल किया जा सकने वाला रेफरेंस प्रॉम्प्ट:
अपलोड की गई सीन रेफरेंस इमेज के आधार पर, मुझे इस सीन की एक व्यापक रेफरेंस इमेज बनाने में मदद करें, जिसमें पूरे माहौल के मल्टी-व्यू नज़रिए और लोकल डिटेल के डिस्प्ले शामिल हों।
(2) AI से सीन एसेट्स को अलग-अलग हिस्सों में बंटवाएं, और उन मॉडल्स को छांटें जिन्हें Tripo में अलग से जनरेट करना होगा।
रेफरेंस इमेजेस तैयार होने के बाद, आप सीधे AI का इस्तेमाल करके यह तय कर सकते हैं कि सीन के कौन से एसेट्स को Tripo में अलग से जनरेट करना होगा और किन्हें Opus 5.5 Blender/Unity में बना सकता है।
रेफरेंस प्रॉम्प्ट:
मैं अभी गेम डेवलपमेंट कर रहा हूं, मेरा टेक स्टैक Tripo + Blender + Unity है। ऊपर बनाई गई सीन रेफरेंस इमेजेस के आधार पर, मुझे गहराई से विश्लेषण करने में मदद करें कि कौन से एसेट्स Tripo से जनरेट करने के लिए उपयुक्त हैं, और कौन से एसेट्स सीधे Blender से बनाने के लिए सही रहेंगे। मेरी पुष्टि के लिए उन एसेट्स को इमेज में मार्क करें जिन्हें Tripo द्वारा जनरेट किया जाना चाहिए।
Tripo में सीन प्रॉप्स के 3D एसेट्स बनाने के लिए, H3.1 मॉडल का इस्तेमाल करने की सलाह दी जाती है, क्योंकि यह एसेट्स की हाई-प्रिसिज़न डिटेल सुनिश्चित करता है।
(3) प्रोफ़ेशनल प्रॉम्प्ट्स का इस्तेमाल करके Opus 5.5 से Blender और Unity को कंट्रोल करवाएं ताकि मॉडलिंग शुरू हो सके। मॉडलिंग की कुंजी यह है कि आप डिटेल वाली रेफरेंस इमेजेस दें और कई कैमरा एंगल्स से इसे बेहतर बनाते रहें।
Tripo में अलग से बनाए जाने वाले 3D प्रॉप्स को जनरेट और एक्सपोर्ट करने के बाद, इन एसेट्स और पहले स्टेप की सीन रेफरेंस इमेजेस को Opus 5.5 को दें, ताकि वह Blender + Unity को कंट्रोल करते हुए पूरा माहौल तैयार कर सके, रेफरेंस इमेजेस के अनुसार प्रॉप्स रख सके, और उनके अनुपात व पोज़िशन को एडजस्ट कर सके।
काम पूरा होने के बाद, सामने और साइड जैसे अलग-अलग एंगल्स से सीन को चेक करें, और स्क्रीनशॉट फीडबैक के ज़रिए लेआउट और डिटेल को धीरे-धीरे ठीक करें।
रेफरेंस प्रॉम्प्ट कुछ इस तरह है:
अपलोड की गई इनडोर और आउटडोर सीन्स की मल्टी-व्यू रेफरेंस इमेजेस और जनरेट किए गए Tripo 3D एसेट्स के आधार पर, रेफरेंस इमेजेस की बिल्कुल सटीक नकल तैयार करें। शर्त यह है कि रेफरेंस इमेजेस जैसी ही शानदार टेक्सचर और डिटेल मिलनी चाहिए। इसे लागू करने के बाद, एक स्वतंत्र रिव्यू एजेंट को भेजें जो कई कैमरा पोज़िशन से सीन की ब्लाइंड ऑडिट करे। अगर रेफरेंस इमेजेस से कोई अंतर दिखे, तो लगातार उसे सुधारते और बेहतर बनाते रहें।
3. कैरेक्टर मॉडलिंग
Image 2.5 कैरेक्टर इमेजेस जनरेट करता है — Tripo में 3D कैरेक्टर मॉडल बनाएं — Blender के Auto-Rig Pro प्लगइन का इस्तेमाल करके रिग और स्किन करें — Mixamo एनिमेशन को जोड़ें — Blender में जटिल इंटरैक्शन के लिए सेकेंडरी एडजस्टमेंट करें (वैकल्पिक)।
यहां हम खास तौर पर समझाने के लिए लिटिल प्रिंस के डिज़ाइन का उदाहरण लेंगे।
(1) Image 2.5 का इस्तेमाल करके कैरेक्टर की मल्टी-व्यू रेफरेंस इमेजेस बनाएं।
कैरेक्टर इमेज और सेटिंग्स के आधार पर, सबसे पहले Image 2.5 का इस्तेमाल करके लिटिल प्रिंस का T-pose फ़ोर-व्यू डायग्राम बनाएं, ताकि सभी व्यूज़ में कैरेक्टर की डिटेल एक जैसी रहे।
(2) 3D कैरेक्टर एसेट्स बनाने के लिए Tripo के Smart Mesh P2.0 मॉडल का इस्तेमाल करें।
Smart Mesh P2.0 एक 3D जनरेशन मॉडल है जिसे खास तौर पर गेम्स और इंटरैक्टिव कंटेंट के लिए डिज़ाइन किया गया है। इसकी खासियत यह है कि यह कंट्रोल करने लायक पॉलीगन काउंट और एडिटेबल कैरेक्टर स्ट्रक्चर जनरेट करता है, जिससे बाद में रिगिंग और एनिमेशन बनाना आसान हो जाता है।
Tripo में "Multi-view to 3D Generation" चुनें और चारों व्यूज़ को एक-एक करके अपलोड करें। डिफ़ॉल्ट टोपोलॉजी क्वाड्रिलैटरल होती है, प्रिसिज़न को अधिकतम पर सेट किया जा सकता है, P2.0 मॉडल चुनें और जनरेशन शुरू करें।
इसके बाद, अगर शुरुआत में जनरेट हुआ सफ़ेद मेश ग्रिड साफ़ और बिना किसी गलती का है, तो मॉडल टेक्सचर बनाने के लिए "Texture" पर क्लिक करें; अगर मेश का आकार सही नहीं लगता, तो आंशिक रूप से दोबारा जनरेट करने के लिए "edit mesh" चुनें।
(3) कैरेक्टर को ऑटोमैटिक रूप से रिग और स्किन करने के लिए Blender में Auto-Rig Pro प्लगइन का इस्तेमाल करें।
प्लगइन सेटअप करने के बाद, कैरेक्टर मॉडल सीधे Claude पर अपलोड करें और नीचे दिया गया प्रॉम्प्ट डालें, जिसे मैंने बार-बार टेस्ट करके और निचोड़ कर तैयार किया है, ताकि रिगिंग और स्किनिंग तेज़ी से हो सके 👇:
कैरेक्टर की रिगिंग और स्किनिंग पूरी करने के लिए Auto-Rig Pro का इस्तेमाल करें, और सुनिश्चित करें कि बोन की पोज़िशन कैरेक्टर के जॉइंट्स से मेल खाए। पूरा होने के बाद, हाथ उठाने, पैर मोड़ने और पीछे मुड़ने जैसे बुनियादी एक्शन टेस्ट करें, और साफ़ तौर पर दिखने वाली विकृति, खिंचाव और क्लिपिंग की समस्याओं को चेक करके ठीक करें।
(4) Mixamo से कैरेक्टर के लिए ज़रूरी एक्शन फ़ाइलें डाउनलोड करें और Opus 5.5 से उन्हें संबंधित कैरेक्टर स्केलेटन के हिसाब से ढलवाएं।
गेम सेटिंग्स के अनुसार mixamo (https://www.mixamo.com/) पर जाएं, कीवर्ड्स के ज़रिए लिटिल प्रिंस को चाहिए एक्शन सर्च करें, और संबंधित FBX एक्शन फ़ाइलें डाउनलोड करें।
इसके बाद, हम Opus से चेक करवा सकते हैं कि क्या ये एक्शन लिटिल प्रिंस के असली स्केलेटन से मैच करते हैं और इंटीग्रेशन पूरा कर सकते हैं।
(5) Blender में स्पेशल एक्शन और कॉन्टैक्ट डिटेल एडजस्ट करें (जटिल इंटरैक्टिव एक्शन के लिए ज़रूरी)।
"लिटिल प्रिंस केतली उठा रहा है" जैसे कैरेक्टर-प्रॉप कॉन्टैक्ट वाले जटिल इंटरैक्शन के लिए, Mixamo में अक्सर बिल्कुल सटीक एक्शन नहीं मिलते। हम पहले कोई मिलता-जुलता बेस एक्शन चुन सकते हैं, और फिर Opus 5.5 से Blender में डिटेल को बेहतर बनवा सकते हैं।
प्रॉम्प्ट का रेफरेंस इस प्रकार है:
कृपया दिए गए Mixamo एक्शन को रेफरेंस मानें, उपयोगी हिस्सों को बनाए रखें, और आर्म पोज़ एडजस्ट करने के लिए Auto-Rig Pro के आर्म IK कंट्रोलर्स का इस्तेमाल करें, उंगलियों की पकड़ और केतली की पोज़िशन की डिटेल को ठीक करते हुए केतली उठाने का एक्शन पूरा करें। सुनिश्चित करें कि हथेली और हैंडल का संपर्क स्थिर रहे, उठाने की प्रक्रिया नेचुरल लगे, और कोई क्लिपिंग, पकड़ छूटना या केतली का हवा में तैरना न हो।
अगले हफ्ते, मैं GitHub पर पूरा गेम कोड और प्रोडक्शन की ज़्यादा विस्तृत जानकारी ओपन-सोर्स कर दूंगा। सभी से गुज़ारिश है कि जुड़े रहें!
ps. अगर आप भी Tripo के साथ अपना 3D क्रिएशन ट्राई करना चाहते हैं, तो मेरे लिंक से रजिस्टर करके 500 क्रेडिट्स बिल्कुल फ्री पा सकते हैं: https://studio.tripo3d.ai/home?invite_code=H2DB1X&utm_source=X&utm_medium=kol&utm_campaign=kol_Saccc
