मैं एआई का उपयोग करके एक वर्चुअल कैरेक्टर बनाना चाहता हूँ!

क्लाउड कोड के बारे में जानने के बाद, मैंने एक सरल गेम बनाने की कोशिश की,ऐसे उपकरण जिनका उद्देश्य अज्ञात हैमैं इसी तरह की चीजें बनाने की कोशिश कर रहा हूं।

मेरी निजी राय में, क्लाउड जापानी भाषा और प्रोग्रामिंग में तो निपुण है, लेकिन इमेज जनरेशन में उतना अच्छा नहीं है। यह मेरा अनुभव है।
इन सबके बीच, मुझे ऑनलाइन एक लेख मिला जिसमें PSD फाइलों को संपादित करने का उल्लेख था।
रुको, क्या ऐसा हो सकता है...?

क्या क्लाउड का उपयोग करके Live2D के लिए PSD फाइलें बनाना संभव है?

Live2D क्या है?

Live2D है2डी एनीमेशन तकनीक जो एक ही चित्र को त्रि-आयामी रूप से गतिमान बनाती है, जैसे कि एक 3डी मॉडल।इसे Live2D Inc. द्वारा विकसित किया गया था।

इस विधि में किसी चित्र को आंखें, मुंह, बाल और शरीर जैसे भागों में विभाजित किया जाता है और उन्हें परतों में व्यवस्थित किया जाता है। प्रत्येक भाग को रूपांतरित करके पलकें झपकाना, मुंह की हलचल और चेहरे की स्थिति को दर्शाया जाता है। इसकी प्रमुख विशेषता यह है कि यह मूल छवि की बनावट को बनाए रखते हुए सुचारू रूप से एनीमेशन कर सकता है, और इसे शुरू से 3डी मॉडल बनाने की तुलना में लागू करना आसान है। हालांकि, देखने में यह त्रि-आयामी लगता है, लेकिन वास्तव में यह एक 2डी विरूपण है, इसलिए यह सीधे बगल या पीछे की ओर मुड़ने वाली गतिविधियों के लिए उपयुक्त नहीं है।

इस प्रोडक्शन में "Live2D Cubism" नामक विशेष सॉफ्टवेयर का उपयोग किया जाता है। क्योंकि यह वेबकैम द्वारा कैप्चर किए गए चेहरे के भावों और सिर की हलचल को मॉडल पर प्रतिबिंबित कर सकता है,इसका व्यापक रूप से वीट्यूबर लाइव स्ट्रीम और स्मार्टफोन गेम में पात्रों के चित्रण में उपयोग किया जाता है।(क्लाउड द्वारा)

...यह मजेदार हो सकता है!

इसका उपयोग करके, ट्विटकास्टिंग स्ट्रीम, जो दूरदराज के गांवों की तुलना में भी कम आबादी वाली हैं, थोड़ी गति प्राप्त कर सकती हैं!
हमारे पास इसे करने के अलावा कोई विकल्प नहीं है!

एक पात्र बनाएं (बलिदान)

कैरेक्टर जनरेशन का काम ChatGPT द्वारा किया गया, जिसमें Images2 की उत्कृष्ट क्षमताएं हैं।

कृपया एक लिंग-तटस्थ लड़के का चित्र बनाएं।

...हूँ?!
"कृपया एक पूर्ण-शरीर वाली खड़ी आकृति बनाएं जो फ्रेम के भीतर फिट हो जाए।"

अरे, चैपी!?
कृपया निम्नलिखित शर्तों के तहत परिणाम प्रदर्शित करें।
"सामने की ओर मुख करके, गर्दन सीधी, मुंह बंद, आंखें खुली, बालों की लटें आंखों को न ढकें।"

अंततः पता चला कि वह एक छोटी लड़की थी, लेकिन जांच अभी जारी है।

मैंने क्लाउडकोड का उपयोग करके इसे PSD (स्यूडो-लाइव2डी) में बदलने की कोशिश की, लेकिन...

जब मैंने तैयार छवि क्लाउड कोड को सौंपी, तो उसने तुरंत एक PSD फ़ाइल तैयार कर दी और एक छद्म-Live2D प्रभाव उत्पन्न कर दिया।
लेकिन,सामग्री अत्यधिक हैइसमें कुछ क्षेत्रों में कमी थी, और इसकी खामियां स्पष्ट रूप से दिखाई दे रही थीं।

क्लाउडकोड के साथ भी, आप केवल ठोस रंगों का उपयोग करके ऐसे चेहरे उत्पन्न कर सकते हैं जो बालों या आंखों से ढके हों।

ChatGPT का उपयोग करके सामग्री उत्पन्न करें

मैं पहले वाला चित्र संलग्न कर दूंगा और उनसे पूछूंगा।
"संलग्न छवि के आधार पर, कृपया Live2D के लिए भागों को अलग करें और उन्हें पारदर्शी पृष्ठभूमि के साथ आउटपुट करें।"
कृपया छवि को पारदर्शी PNG फ़ाइल के रूप में आउटपुट करें।

ऐसा लगता है कि हम इसे सीधे क्लाउडकोड को भेज सकते हैं, लेकिन ऐसा लगता है कि इसे संभालना मुश्किल होगा।

प्रत्येक भाग के लिए सामग्री तैयार करें।

मैं इस किरदार को निभाना चाहूंगा।
कृपया इस पात्र का केवल चेहरा ही प्रदर्शित करें, जिसमें आंखें, भौहें, बाल, मुंह, कान और गर्दन शामिल न हों।

इस तरह के निर्देशों को बार-बार देखकर आप सामग्री एकत्र करेंगे।
सामग्रियों की परत संरचना इस बात पर आधारित होगी कि उन्हें PSD प्रारूप में कैसे परिवर्तित किया जाता है।

एकत्रित सामग्री

मैंने निम्नलिखित चरणों का पालन करते हुए सामग्री एकत्र की:

• आंखें (बाईं और दाईं अलग-अलग)
  • आँख का सफेद भाग
  • आँख की पुतली (आइरिस)
  • ऊपरी पलकें
  • निचली पलक
• भौहें (अभिव्यक्ति/बाएं और दाएं)
• मुख (अभिव्यक्ति द्वारा)
• कान (बाएं और दाएं अलग-अलग)
• 鼻
• 髪
  • पीठ के बाल
  • सिर का ऊपरी भाग/मुकुट
  • बनूंगी
  • पार्श्व बाल (बाएं और दाएं दोनों तरफ अलग-अलग)
  • उड़ते हुए बाल
  • साइडबर्न (बाएं और दाएं अलग-अलग)
  • पार्श्व बाल (बाएं और दाएं अलग-अलग)
  • बालों की ढीली लटें (बाएं और दाएं तरफ अलग-अलग)
  • बाल के लिये कांटा

...और बस, चेहरे को ढकने वाले हिस्सों के लिए इतना ही।
क्योंकि यह लंबा है, इसलिए धड़ को छोड़ दिया जाएगा।

और अब, हम अंततः सोर्स कोड को क्लाउडकोड में जमा कर रहे हैं।

कृपया मेरी मदद करें, क्लाउडकोड!

पहली किस्त

·····कौन?
आपकी भौहों को क्या हो रहा है?

सबसे पहले तो, मेरे बाल बहुत ज्यादा हैं इसलिए मैं उन्हें पतला करवा लूंगी।

दूसरी किस्त

मैं थोड़ा और करीब गया, लेकिन वह नींद में लग रहा था।

तीसरी किस्त

आँखों की समस्या ठीक कर दी गई है। (कृत्रिम बुद्धिमत्ता द्वारा)
क्या वह थोड़ी उदास सी दिखने वाली छवि गायब हो गई है?
चलिए एक वेब मॉडल पोस्ट करने का प्रयास करते हैं।

तो, इस बार (क्योंकि मैं थोड़ा ऊब गया हूँ), मैं तीसरी किस्त का मॉडल बनाना शुरू करना चाहूँगा।

निष्कर्ष के तौर पर (?)

वी-स्ट्रीमिंग करने के लिए, आपको वीट्यूब स्टूडियो नामक सॉफ़्टवेयर का उपयोग करना होगा।
उस संदर्भ में इसका उपयोग करने के लिए, आपको Live2D Cubism नामक सॉफ़्टवेयर का उपयोग करना होगा।
ऐसा लगता है कि क्लाउडकोड मेरे लिए यह काम नहीं करेगा, इसलिए मैं इसे बहुत कम दर्शकों वाले स्ट्रीम पर करने की कोशिश करूंगा।

जब मैं यह लेख लिख रहा हूं, उस दिन यानी 3 नवंबर (मंगलवार, एक सार्वजनिक अवकाश) को ट्विटकास्टिंग रखरखाव के लिए बंद है, इसलिए मैं इसके दोबारा चालू होने के बाद इसे आजमाना चाहूंगा।
ट्विटकास्टिंग के लिए शुभकामनाएँ!

अंत तक देखने के लिए धन्यवाद।
तो, यह उस स्ट्रीमिंग का विज्ञापन था।