Gemini Omni एआई वीडियो जनरेटर: मल्टीमॉडल इनपुट, अक्षर और आवाज

Bottom Line Up Front (BLUF): Gemini Omni एक मल्टीमॉडल एआई वीडियो जनरेटर है: टेक्स्ट प्रॉम्प्ट के साथ यह छवियों, वीडियो, ऑडियो और यहां तक ​​कि सहेजे गए पात्रों को इनपुट के रूप में स्वीकार करता है। किसी दृश्य का शब्दों में वर्णन करें, चित्रों के साथ उसका समर्थन करें, संवाद के लिए एक आवाज चुनें और एक ही नायक की विशेषता वाली क्लिप की एक पूरी श्रृंखला शूट करें - सभी एक मॉडल के अंदर।

एक आभासी प्रस्तुतकर्ता एआई-जनरेटेड आवाज के साथ कैमरे पर बात कर रहा है
Gemini Omni 1 के साथ NeuralSpace पर बनाया गया उदाहरण

व्यवहार में Omni का क्या अर्थ है

अधिकांश वीडियो मॉडल टेक्स्ट या एकल चित्र लेते हैं। Gemini Omni मिश्रित आहार लेता है: एक टेक्स्ट प्रॉम्प्ट और अतिरिक्त संदर्भ के रूप में सात चित्र, वीडियो या ऑडियो। Want एक विशिष्ट फ्रेम से प्रेरित एक क्लिप, जो एक विशिष्ट ट्रैक के मूड को दर्शाती है? सब कुछ एक साथ लाएँ - मॉडल आपके द्वारा संलग्न प्रत्येक स्रोत का वजन करता है।

इससे यह बदल जाता है कि आप कार्य की रूपरेखा कैसे बनाते हैं। "इस तरह का एक घर, उस तरह की रोशनी" जैसे लंबे पैराग्राफ पेंटिंग के बजाय, आप बस घर की एक तस्वीर दिखाते हैं और केवल कार्रवाई के लिए शब्दों का उपयोग करते हैं। टेक्स्ट कथानक को संचालित करता है, अनुलग्नक रूप को परिभाषित करते हैं - प्रत्येक इनपुट प्रकार अपना काम करता है।

पात्र: प्रत्येक क्लिप में एक नायक

साधारण जनरेटर का अभिशाप यह है कि नायक क्लिप से क्लिप में परिवर्तन करता है। यहां इसे एक समर्पित कैरेक्टर टैब द्वारा हल किया गया है: आप एक बार एक कैरेक्टर बनाते हैं, यह आपकी निजी लाइब्रेरी में आ जाता है, और तब से आप इसे किसी भी पीढ़ी से जोड़ देते हैं। वीडियो दर वीडियो उपस्थिति लगातार बनी रहती है।

इस तरह श्रृंखला बनती है: एक आभासी शो होस्ट, एक ब्रांड शुभंकर, बच्चों की कहानियों के लिए एक आवर्ती नायक। सहेजे गए पात्रों को लाइब्रेरी से जेनरेशन फॉर्म में एक क्लिक के साथ चुना जाता है - कोई पुनः अपलोड करने वाला संदर्भ नहीं है और उम्मीद है कि मॉडल चेहरे को "याद" रखेगा।

एक टेक्स्ट प्रॉम्प्ट, फोटो संदर्भ और लाइब्रेरी से चुने गए एक चरित्र को मिलाकर जनरेशन फॉर्म
Gemini Omni 1 के साथ NeuralSpace पर बनाया गया उदाहरण

वॉइस-ओवर: पूर्व निर्धारित आवाज़ें और आपकी अपनी

एक क्लिप शुरू से ही ध्वनि के साथ आ सकती है। सेटिंग्स पूर्व निर्धारित आवाज़ों, पुरुष और महिला, का एक रोस्टर पेश करती हैं, जो अलग-अलग समय और व्यक्तित्वों में फैली हुई हैं - नरम और उच्च से लेकर निम्न और गंभीर तक। एक आवाज चुनें, लाइन को अपने प्रॉम्प्ट में डालें, और पात्र सीधे फ्रेम में बोलता है।

यदि कोई भी प्रीसेट फिट नहीं बैठता है, तो ऑडियो टैब आपको बेस प्रीसेट के शीर्ष पर एक कस्टम आवाज बनाने की सुविधा देता है। यह आपकी निजी लाइब्रेरी से जुड़ जाता है और मानक लाइब्रेरी की तरह ही पीढ़ियों से जुड़ जाता है। एक ब्रांड के लिए, इसका मतलब है कि आपके द्वारा प्रकाशित प्रत्येक वीडियो में एक पहचानने योग्य आवाज़।

4K तक आउटपुट और फ़्रेम प्रारूप

Gemini Omni साइट पर 4K आउटपुट वाले कुछ मॉडलों में से एक है: उपलब्ध रिज़ॉल्यूशन 720p, 1080p और 4K हैं। क्लिप की लंबाई 4, 6, 8 या 10 सेकंड है; सामाजिक फ़ीड के लिए फ़्रेम या तो वाइडस्क्रीन 16:9 या वर्टिकल 9:16 है। कीमत अवधि और गुणवत्ता के साथ मापी जाती है।

एक व्यावहारिक दिनचर्या: ड्राफ्ट को 720p में पुनरावृत्त करें जहां पीढ़ी सस्ती और तेज है, फिर विजेता संस्करण को 1080p या 4K में पुन: चलाएँ। तैयार क्लिप आपकी पीढ़ी के इतिहास में रहते हैं, जहां आप उन्हें डाउनलोड कर सकते हैं, उनका विस्तार कर सकते हैं या बदलाव के साथ प्रॉम्प्ट को फिर से चला सकते हैं।

अपनी पहली पीढ़ी से कैसे संपर्क करें?

हर सुविधा को एक साथ चालू न करें. यह जानने के लिए कि मॉडल विवरण कैसे पढ़ता है, अकेले पाठ से पहली क्लिप बनाएं। फिर एक संदर्भ छवि जोड़ें, फिर एक आवाज, और उसके बाद ही एक स्थायी चरित्र सेट करें। प्रत्येक चरण नियंत्रण जोड़ता है लेकिन शब्दों में थोड़ी अधिक देखभाल की मांग करता है।

अपने दृश्य विवरण में क्लासिक क्रम रखें: फ़्रेम में कौन है, वे क्या करते हैं, यह कहाँ होता है, कैमरा कैसे व्यवहार करता है। यदि कोई बोली गई पंक्ति है, तो उसे उसका अपना वाक्य दें। यह संरचना लगभग हर बार पहले या दूसरे प्रयास में एक सुसंगत क्लिप पेश करती है।

अक्सर पूछे जाने वाले सवाल

Gemini Omni नियमित वीडियो मॉडल से किस प्रकार भिन्न है?

मिश्रित इनपुट और पुस्तकालय। एक नियमित मॉडल को पाठ या एक चित्र मिलता है; यहां आप पाठ, चित्र, वीडियो और ऑडियो को जोड़ते हैं, और शीर्ष पर सहेजे गए अक्षर और कस्टम आवाज़ें संलग्न करते हैं। यह इसे एक नायक के आसपास निर्मित धारावाहिक सामग्री के लिए सही विकल्प बनाता है।

मैं एक ही चरित्र के साथ कई क्लिप कैसे बना सकता हूँ?

कैरेक्टर टैब में कैरेक्टर बनाएं - यह आपकी लाइब्रेरी में सेव हो जाता है। फिर हर नई पीढ़ी में एक क्लिक से इसे चुनें। संदर्भों को दोबारा अपलोड करने की आवश्यकता के बिना नायक की उपस्थिति क्लिप से क्लिप तक दोहराई जाती है।

क्या वीडियो में ध्वनि और वाणी शामिल हो सकती है?

हाँ। पूर्व निर्धारित आवाज़ों में से एक चुनें या ऑडियो टैब में अपनी आवाज़ बनाएं, फिर दृश्य विवरण के अंदर चरित्र की पंक्ति लिखें। मॉडल एक क्लिप प्रस्तुत करता है जहां नायक चयनित आवाज में उस पंक्ति को प्रस्तुत करता है।

मिलती-जुलती मॉडल्स