Luma AI Launches AI-Powered Text-to-Video Generation Platform Dream Machine

लूमा एआई ने बुधवार को वैश्विक स्तर पर अपना आर्टिफिशियल इंटेलिजेंस (एआई) टेक्स्ट-टू-वीडियो जेनरेशन मॉडल, ड्रीम मशीन लॉन्च किया। यह प्लैटफ़ॉर्म सरल या वर्णनात्मक टेक्स्ट प्रॉम्प्ट से पाँच सेकंड तक के वीडियो बना सकता है। एआई मॉडल सिनेमाई, एनीमेशन, यथार्थवादी और अन्य कई शैलियों में वीडियो बना सकता है। एआई फ़र्म का दावा है कि ड्रीम मशीन को पूरी तरह से वीडियो पर प्रशिक्षित किया गया था, और यह “शारीरिक रूप से सटीक, सुसंगत और घटनापूर्ण शॉट्स” बनाने में सक्षम है। प्लेटफ़ॉर्म वर्तमान में उपयोग करने के लिए निःशुल्क है, लेकिन इसकी दैनिक जेनरेशन सीमा होने की संभावना है।

लूमा एआई ने ड्रीम मशीन पेश की

वेबसाइट के अनुसार, ड्रीम मशीन एआई मॉडल एक ट्रांसफॉर्मर मॉडल पर बनाया गया है और इसे सीधे वीडियो पर प्रशिक्षित किया गया था। आमतौर पर, बड़े भाषा मॉडल (एलएलएम) को टेक्स्ट और छवियों पर प्रशिक्षित किया जाता है और फिर वीडियो में ले जाया जाता है, क्योंकि उन्हें अधिक स्थानिक और गति समझ की आवश्यकता होती है। कंपनी ने कहा, “ड्रीम मशीन एक सार्वभौमिक कल्पना इंजन बनाने की दिशा में हमारा पहला कदम है।”

ड्रीम मशीन रनवे एआई और पिका 1.0 जैसे वीडियो जनरेशन प्लेटफ़ॉर्म में शामिल हो गई है जो सार्वजनिक डोमेन में भी उपलब्ध हैं और तीन से पांच सेकंड के बीच वीडियो जनरेशन प्रदान करते हैं। गैजेट्स 360 ने प्लेटफ़ॉर्म को आज़माया और पाया कि प्लेटफ़ॉर्म का प्रॉम्प्ट पालन घटिया है। यह कई पात्रों के साथ संघर्ष करता है या जब प्रॉम्प्ट बहुत जटिल होता है। हालाँकि, अन्य दो की तुलना में, यह उच्च-गुणवत्ता वाले सिनेमाई वीडियो बनाने में सक्षम है।

AI प्लैटफ़ॉर्म को एक वीडियो बनाने में 120 सेकंड लगते हैं, जिसके बारे में कंपनी का दावा है कि इसमें 120 अलग-अलग फ़्रेम होंगे। ड्रीम मशीन के बारे में यह भी कहा जाता है कि यह समझती है कि लोग, जानवर और वस्तुएँ भौतिक दुनिया के साथ कैसे इंटरैक्ट करती हैं और सटीक भौतिकी और चरित्र स्थिरता के साथ वीडियो बनाती हैं।

हालांकि, लूमा एआई ने वर्तमान मोड में कई सीमाओं पर भी प्रकाश डाला, जैसे कि मूवमेंट, टेक्स्ट, मॉर्फिंग और प्रसिद्ध जानूस समस्या, जहां एक सुसंगत 3D आउटपुट दिखाने के बजाय, एआई मॉडल विभिन्न दिशाओं में किसी ऑब्जेक्ट के कई कैनोनिकल दृश्य दिखाता है।

लूमा एआई की ड्रीम मशीन ने स्टॉर्मट्रूपर्स के बारे में एक वीडियो बनाया
फोटो क्रेडिट: लूमा एआई/ड्रीम मशीन

लूमा एआई ने एआई मॉडल के बारे में कोई तकनीकी जानकारी साझा नहीं की है, इसलिए पैरामीटर आकार, बेंचमार्क, आर्किटेक्चर और प्रशिक्षण विधियों के बारे में जानकारी नहीं है। कंपनी ने प्रशिक्षण डेटा की खरीद के बारे में भी कोई विवरण साझा नहीं किया। विशेष रूप से, गैजेट्स 360 कॉपीराइट वाले पात्रों के साथ कई वीडियो बनाने में सक्षम था।

इस प्लैटफ़ॉर्म को आज़माने के लिए, उत्साही लोग वेबसाइट पर जाकर ‘ट्राई नाउ’ बटन पर क्लिक कर सकते हैं। वीडियो बनाने से पहले उपयोगकर्ताओं को प्लैटफ़ॉर्म के लिए साइन अप करना होगा।