Cloudflare Introduces AI Audit Tool to Block Data Scraping AI Bots from Accessing Websites

क्लाउडफ्लेयर ने एआई ऑडिट का अनावरण किया है, जो टूल का एक नया सूट है जो वेबसाइट मालिकों और ब्लॉगर्स को उनकी सामग्री पर अधिक नियंत्रण प्रदान करने और स्वचालित सिस्टम द्वारा इसका उपयोग करने के तरीके के लिए डिज़ाइन किया गया है। सुरक्षा उपकरण उपयोगकर्ताओं को कृत्रिम बुद्धिमत्ता (एआई) बॉट्स को ब्लॉक करने या अनुमति देने में सक्षम करेगा जो अक्सर डेटा को स्क्रैप करने के लिए वेबसाइटों को क्रॉल करते हैं। कंपनी अपने सभी मौजूदा ग्राहकों को बिना किसी अतिरिक्त शुल्क के यह टूल दे रही है। क्लाउडफ्लेयर एक फीचर भी जोड़ रहा है जिससे वेबसाइट मालिकों को विस्तृत विश्लेषण देखने को मिलेगा कि कौन से बॉट प्लेटफॉर्म पर आ रहे हैं और उनके व्यवहार पैटर्न क्या हैं।

जेनेरिक एआई तकनीक की बढ़ती लोकप्रियता के साथ, मानव-निर्मित डेटा के साथ बड़े भाषा मॉडल (एलएलएम) को प्रशिक्षित करने की होड़ मच गई है। यह न केवल एक फाउंडेशन मॉडल बनाने के लिए बल्कि उसे आगे बढ़ाने और सुधारने के लिए भी महत्वपूर्ण है। हालाँकि, यहां मुख्य मुद्दा सार्वजनिक रूप से उपलब्ध डेटा स्रोतों तक पहुंच है। अधिकांश एआई कंपनियां पहले ही इन डेटासेट का अध्ययन कर चुकी हैं, और अब एआई मॉडल को प्रशिक्षित करने के लिए अधिक डेटा की आवश्यकता है।

एआई बॉट डेवलपर्स को एआई मॉडल को प्रशिक्षित करने के लिए अधिक जानकारी इकट्ठा करने में मदद करने के लिए डिज़ाइन किए गए हैं। उन्हें वास्तविक उपयोगकर्ता की नकल करने वाले व्यवस्थित कार्यक्रमों के रूप में समझा जा सकता है जो वेबसाइटों में प्रवेश कर सकते हैं और पाठ, छवि और वीडियो डेटा की प्रतिलिपि बना सकते हैं। ये एआई बॉट कम समय में बड़ी मात्रा में डेटा को खंगाल सकते हैं और इसे एआई मॉडल तक पहुंचा सकते हैं। हाल के दिनों में, कई मीडिया फर्मों और बड़ी वेबसाइटों ने एआई फर्मों के खिलाफ साहित्यिक चोरी और एलएलएम को खिलाने के लिए अवैध रूप से डेटा का उपयोग करने का आरोप लगाते हुए मुकदमा दायर किया है।

क्लाउडफ्लेयर का एआई ऑडिट टूल एक सुरक्षात्मक परत के रूप में आता है जो ऐसे बॉट्स को वेबसाइटों तक पहुंचने से रोक सकता है। कंपनी ने एक प्रेस विज्ञप्ति में खुलासा किया कि उपयोगकर्ताओं को इस पर अधिक नियंत्रण देने के लिए टूल में सुधार भी किया गया है कि कौन से बॉट प्रतिबंधित होंगे और किन बॉट को एक्सेस की अनुमति दी जाएगी। यह उन मामलों में उपयोगी है जहां प्लेटफ़ॉर्म ने एआई फर्म के साथ सौदा किया है और उसके बॉट्स को डेटा लेने से कोई आपत्ति नहीं है। वैकल्पिक रूप से, वेबसाइट मालिक कुछ एआई मॉडल तक पहुंच देना चाह सकता है जो बेहतर पहुंच हासिल करने के लिए डेटा के स्रोत को जिम्मेदार ठहराते हैं।

क्लाउडफ्लेयर ने इस बात पर प्रकाश डाला कि वह एक वर्कफ़्लो भी बना रहा है जहां वेबसाइट मालिक अपनी सामग्री पर उचित मूल्य निर्धारित कर सकते हैं। दूसरी ओर, एआई बॉट मालिक इस फ़ायरवॉल के साथ लेनदेन करने में सक्षम होंगे और एक बार राशि का भुगतान करने के बाद, उन्हें सामग्री को स्कैन करने का अधिकार दिया जाएगा। कंपनी इस बात पर प्रकाश डालती है कि उसका मार्केटप्लेस जैसा टूल उन उपयोगकर्ताओं के लिए फायदेमंद हो सकता है जिनके पास अपनी वेबसाइट पर आने वाली प्रत्येक एआई फर्म के साथ बातचीत करने और सौदे करने के लिए बैंडविड्थ या संसाधन नहीं हैं।