क्लाउडफ्लारे ने वेबसाइट के मालिकों को एआई बॉट क्रॉलर एक्सेस में मदद करने के लिए टूल लॉन्च किया

सॉफ्टवेयर कंपनी ने मंगलवार को कहा कि क्लाउडफ्लारे ने एक टूल लॉन्च किया है जो बॉट क्रॉलर को अनुमति या मुआवजे के बिना सामग्री तक पहुंचने से रोकता है, ताकि वेबसाइटों को एआई फर्मों से अपनी सामग्री पर पहुंचने और प्रशिक्षित करने की कोशिश करने में मदद मिल सके।

टूल वेबसाइट मालिकों को यह चुनने की अनुमति देता है कि क्या कृत्रिम बुद्धिमत्ता क्रॉलर अपनी सामग्री तक पहुंच सकते हैं और “पे प्रति क्रॉल” मॉडल के माध्यम से पहुंच के लिए एक मूल्य निर्धारित कर सकते हैं, जो उन्हें यह नियंत्रित करने में मदद करेगा कि उनके काम का उपयोग कैसे किया जाता है और मुआवजा दिया जाता है, क्लाउडफ्लेर ने कहा।

एआई क्रॉलर मूल स्रोत पर आगंतुकों को भेजे बिना सामग्री एकत्र करने के साथ, वेबसाइट के मालिक खोज ट्रैफ़िक रेफरल के रूप में अतिरिक्त राजस्व स्रोतों को विकसित करना चाह रहे हैं जो एक बार विज्ञापन राजस्व में गिरावट उत्पन्न करते हैं।

इस पहल को कोंडे नास्ट और एसोसिएटेड प्रेस सहित प्रमुख प्रकाशकों द्वारा समर्थित किया गया है, साथ ही साथ सोशल मीडिया कंपनियां जैसे कि रेडिट और पिंटरेस्ट।

क्लाउडफ्लारे के मुख्य रणनीति अधिकारी स्टेफ़नी कोहेन ने कहा कि ऐसे उपकरणों का लक्ष्य प्रकाशकों को अपनी सामग्री पर नियंत्रण देना था, और ऑनलाइन सामग्री रचनाकारों और एआई कंपनियों के लिए एक स्थायी पारिस्थितिकी तंत्र सुनिश्चित करना था।

कोहेन ने एक साक्षात्कार में कहा, “ट्रैफ़िक पैटर्न में बदलाव तेजी से रहा है, और कुछ बदलने की जरूरत है।” “यह सिर्फ इंटरनेट के लिए एक नए मॉडल की शुरुआत है।”

उदाहरण के लिए, Google ने आगंतुकों के लिए क्रॉल के अपने अनुपात को देखा है, जो कि क्लाउडफ्लारे के आंकड़ों के अनुसार, 6: 1 से 6: 1 से 18: 1 तक की साइटों पर वापस जाने वाले आगंतुकों को संदर्भित किया गया है, यह सुझाव देते हुए कि खोज दिग्गज अपने रेंगने को बनाए रख रहे हैं लेकिन रेफरल को कम कर रहे हैं।

गिरावट उपयोगकर्ताओं को Google के खोज परिणामों के भीतर सीधे उत्तर खोजने के परिणामस्वरूप हो सकती है, जैसे कि AI ओवरव्यू। फिर भी, Google का अनुपात अन्य AI कंपनियों की तुलना में बहुत अधिक है, जैसे कि Openai का 1,500: 1।

दशकों के लिए, खोज इंजनों ने इंटरनेट पर उपयोगकर्ताओं को वेबसाइटों पर वापस निर्देशित करने वाली सामग्री को अनुक्रमित किया है, एक दृष्टिकोण जो गुणवत्ता सामग्री के उत्पादन के लिए रचनाकारों को पुरस्कृत करता है। हालांकि, एआई कंपनियों के क्रॉलर ने इस मॉडल को बाधित कर दिया है क्योंकि वे आगंतुकों को मूल स्रोत पर भेजे बिना सामग्री की कटाई करते हैं और चैटबॉट्स जैसे कि चैटगेट, राजस्व और मान्यता से वंचित करने वाले चैटबॉट के माध्यम से जानकारी एकत्र करते हैं।

कई एआई कंपनियां एआई सिस्टम में उपयोग के लिए अपनी सामग्री के स्क्रैपिंग को ब्लॉक करने के लिए प्रकाशकों द्वारा उपयोग किए जाने वाले एक सामान्य वेब मानक को दरकिनार कर रही हैं, और तर्क देते हैं कि उन्होंने मुफ्त में सामग्री तक पहुंचने में कोई कानून नहीं तोड़ा है।

जवाब में, न्यूयॉर्क टाइम्स सहित कुछ प्रकाशकों ने कॉपीराइट उल्लंघन के लिए एआई कंपनियों पर मुकदमा दायर किया है, जबकि अन्य ने अपनी सामग्री को लाइसेंस देने के लिए सौदे किए हैं।

उदाहरण के लिए, Reddit ने कथित तौर पर Reddit उपयोगकर्ता टिप्पणियों को स्क्रैप करने के लिए AI स्टार्टअप एन्थ्रोपिक पर मुकदमा दायर किया है Google के साथ एक सामग्री लाइसेंसिंग सौदा करते हुए, अपने AI चैटबॉट को प्रशिक्षित करने के लिए।