क्लाउडफ्लारे के सीईओ मैथ्यू प्रिंस ने एक प्रेस विज्ञप्ति या कमाई कॉल में अपनी सबसे बड़ी एआई घोषणा नहीं की। उन्होंने इसे एक बार में एक एक्स जवाब दिया।
इस महीने की शुरुआत में, CloudFlare का शुभारंभ किया इसे “कंटेंट इंडिपेंडेंस डे” कहा जाता है, एक नीति परिवर्तन जो एआई कंपनियों को उन वेबसाइटों को स्क्रैप करने से रोकती है जो इसे बचाती हैं जब तक कि वे सामग्री रचनाकारों की भरपाई नहीं करते हैं। यह कदम दशकों पुरानी वेब अर्थव्यवस्था को चुनौती देता है, जहां Google जैसी कंपनियां ट्रैफ़िक के बदले में स्वतंत्र रूप से सामग्री को अनुक्रमित कर सकती हैं, और इसे एक नए, बहुत कठिन मानक के साथ बदल देती हैं: बिना किसी सौदे के अधिक रेंगने वाली नहीं।
लेकिन असली कहानी यह है कि आगे क्या हुआ।
अनफ़िल्टर्ड एक्स (पूर्व में ट्विटर) की एक श्रृंखला में कई दिनों में जवाब दिया गया, प्रिंस ने खुलासा किया कि क्लाउडफ्लेयर पहले से ही कुछ एआई दिग्गजों को उल्लंघनकर्ताओं के रूप में मान रहा है, जो वेब के नियमों को सेट करता है, एक नाटकीय शक्ति पारी का संकेत देता है।
सबसे उल्लेखनीय प्रवेशों में से एक? “मिथुन डिफ़ॉल्ट रूप से अवरुद्ध है,” प्रिंस ने 3 जुलाई को लिखा, Google के एआई मॉडल का जिक्र करते हुए। दूसरे शब्दों में, Google के AI एजेंटों का अब CloudFlare द्वारा संरक्षित वेबसाइटों से स्वतंत्र रूप से डेटा का स्वागत करने के लिए स्वागत नहीं है जब तक कि Google नए नियमों या भुगतान का अनुपालन नहीं करता है।
यह बहुत बड़ी बात है। CloudFlare वेब के लगभग 20% की रक्षा करता है, जिसमें प्रमुख प्रकाशक, मीडिया आउटलेट और निर्माता प्लेटफॉर्म शामिल हैं। यदि यह उन साइटों से एआई क्रॉलर को काट देता है, तो बड़ी भाषा मॉडल जो आज के चैटबॉट्स, एआई सारांश और उत्तर बक्से को पावर करते हैं, भूख लग सकती हैं।
प्रकाशकों के लिए एक प्रमुख स्टिकिंग पॉइंट GoogleBot, Google का मुख्य क्रॉलर है, जो पारंपरिक रूप से खोज के लिए सामग्री को अनुक्रमित करता है। अब, GoogleBot का उपयोग Google के AI मॉडल को डेटा खिलाने के लिए भी किया जाता है, जिसमें इसके नए AI ओवरव्यू और मिथुन LLM (बड़े भाषा मॉडल) शामिल हैं जो इसके कई जनरेटिव AI सुविधाओं को शक्ति प्रदान करते हैं। यह दोहरी भूमिका उन रचनाकारों के लिए हितों का टकराव पैदा करती है जो पारंपरिक खोज परिणामों में दिखाई देना चाहते हैं, लेकिन उनकी सामग्री का उपयोग बिना मुआवजे के एआई प्रशिक्षण के लिए नहीं किया जाता है।
प्रिंस ने यह स्पष्ट किया कि Google की वर्तमान प्रथाओं को पुरानी शर्तों के तहत अनुमति नहीं दी जाएगी। “हम Google को क्लासिक खोज अनुक्रमण को अवरुद्ध किए बिना, उत्तर बॉक्स और AI अवलोकन को ब्लॉक करने के तरीके प्रदान करने के लिए Google प्राप्त करेंगे,” उन्होंने लिखा। अगर नहीं? “हमारे पास उन्हें मजबूर करने के कई अन्य तरीके हैं।”
अनुवाद: क्लाउडफ्लारे, एक कंपनी, जिसे एक बार DDOS हमलों से वेबसाइटों की सुरक्षा के लिए जाना जाता है, अब खुद को AI अर्थव्यवस्था के लिए एक प्रहरी के रूप में देखता है, और यह फ्लेक्स से डरता नहीं है।
मिथुन डिफ़ॉल्ट रूप से अवरुद्ध है। क्लासिक सर्च इंडेक्सिंग को अवरुद्ध किए बिना, हम उत्तर बॉक्स और एआई अवलोकन को ब्लॉक करने के तरीके प्रदान करने के लिए Google प्राप्त करेंगे।
– मैथ्यू प्रिंस@(@eastdakota) 3 जुलाई, 2025
लेकिन एक उपयोगकर्ता ने इस तकनीकी व्यवहार्यता पर वापस धकेल दिया: “क्या यह संभव है? क्या एआई ओवरव्यू सर्च इंडेक्स रैंकिंग का प्रतिनिधित्व नहीं है – सबसे अधिक चीर नहीं है?” “आरएजी” पुनर्प्राप्ति संवर्धित पीढ़ी को संदर्भित करता है, जहां एलएलएम अनुक्रमित डेटा से खींचते हैं। राजकुमार का कर्ट, आत्मविश्वासपूर्ण उत्तर: “यह है। #Staytuned।” यह हैशटैग संकेत देता है कि क्लाउडफ्लारे का मानना है कि उसके पास एआई संचालित सारांशों और सुविधाओं को मानक खोज अनुक्रमण से अलग करने के लिए तकनीकी चॉप्स हैं, कुछ Google इस प्रकार अब तक अनिच्छुक या प्रकाशकों की पेशकश करने में असमर्थ रहा है।
यह है। #बने रहें
– मैथ्यू प्रिंस@(@eastdakota) 3 जुलाई, 2025
प्रिंस का स्वर राजनयिक लेकिन अस्वाभाविक रूप से दृढ़ है। वह कहते हैं कि उन्हें “उनके साथ बातचीत से प्रोत्साहित किया जाता है।” लेकिन वह प्रवर्तन उपकरणों पर भी संकेत देता है यदि बिग टेक सहयोग नहीं करता है।
उन्होंने कहा, “सबसे खराब स्थिति में हम एक कानून पारित करेंगे, जिसके लिए उन्हें अपने क्रॉलर को तोड़ने की आवश्यकता है और फिर वहां से अपने क्रॉलर के लिए सभी मार्गों की घोषणा की। और यह कठिन नहीं होगा। लेकिन मुझे उम्मीद है कि इसे उस पर आने की आवश्यकता नहीं होगी,” उन्होंने एक अन्य पोस्ट में कहा।
सबसे खराब स्थिति में हम एक कानून पारित करेंगे, जिसके लिए उन्हें अपने क्रॉलर को तोड़ने की आवश्यकता है और फिर वहां से अपने क्रॉलर के लिए सभी मार्गों की घोषणा करें। और यह कठिन नहीं होगा। लेकिन मुझे उम्मीद है कि इसे उस पर आने की जरूरत नहीं होगी।
– मैथ्यू प्रिंस@(@eastdakota) 7 जुलाई, 2025
Google को अनुकूलित करने के लिए “मजबूर” होने का विचार एक कंपनी से आने वाला एक शक्तिशाली कथन है जो वेब मानकों को निर्धारित नहीं करता है, लेकिन प्रभावी रूप से अपने ट्रैफ़िक के एक महत्वपूर्ण हिस्से को नियंत्रित करता है। प्रिंस का आत्मविश्वास CloudFlare के अद्वितीय उत्तोलन को रेखांकित करता है।
राजकुमार अलार्म बजने में अकेला नहीं है। एक एक्स उपयोगकर्ता ने अमेज़ॅन के एआई क्रॉलर, नोवा को अवरुद्ध करने के बारे में पूछा। प्रिंस ने “हाइपरस्केलर्स और उनके एआई प्रयासों के साथ हितों के टकराव” को स्वीकार करते हुए जवाब दिया, कि कैसे अमेज़ॅन, गूगल और माइक्रोसॉफ्ट जैसी कंपनियों ने एआई सेवाओं और बड़े पैमाने पर बुनियादी ढांचे के बैकबोन दोनों को चलाया।
प्रिंस की टिप्पणियां टेक में अधिकांश सीईओ की तुलना में आगे बढ़ती हैं। जबकि अन्य लोग “एआई सुरक्षा” या “निष्पक्ष लाइसेंसिंग” के लिए अस्पष्ट कॉल जारी करते हैं, वह अगले चरणों को पूरा कर रहा है। पहला: क्रॉलर को रोकें। दूसरा: एक मार्केटप्लेस का निर्माण करें जहां एआई इंजन क्रिएटर्स को ट्रैफ़िक के लिए नहीं, बल्कि मूल्य के लिए भुगतान करते हैं, या उनकी सामग्री एआई मॉडल में ज्ञान अंतराल को कितनी अच्छी तरह से भरती है। पोस्ट-खोज वेब के लिए इसे एसईओ के रूप में सोचें।
तकनीकी रूप से, CloudFlare AI उपयोगकर्ता एजेंटों की पहचान करके इन नियमों को लागू कर सकता है, मूल रूप से सॉफ्टवेयर लेबल जो क्रॉलर का उपयोग करते हैं, और जब तक अनुमति नहीं देते हैं, तब तक उन्हें स्वचालित रूप से अवरुद्ध करते हैं। उदाहरण के लिए, यह मिथुन (Google), क्लाउड (एन्थ्रोप्रोपिक), और CHATGPT (Openai) को सामग्री तक पहुँचने से रोक सकता है जब तक कि कोई प्रकाशक स्पष्ट रूप से उन्हें सफेद नहीं करता है।
यह एक आदर्श प्रणाली नहीं है – उपहास क्रॉलर को खराब कर सकता है, और सभी बॉट खुद को पहचानते नहीं हैं – लेकिन यह एक शक्तिशाली संकेत है। और अपनी घड़ी के तहत अरबों पृष्ठों के साथ, क्लाउडफ्लेयर अब एक समय में एआई प्रशिक्षण डेटा, एक फ़ायरवॉल नियम के भविष्य को आकार देने के लिए एक अनूठी स्थिति में है।
प्रिंस के पदों से पता चलता है कि सगाई के नियम वास्तविक समय में बदल रहे हैं। एआई कंपनियां, एक बार चुपचाप वेब पर फहराने के लिए उपयोग की जाती थीं, जल्द ही सार्वजनिक रूप से, पारदर्शी और निर्माता के अनुकूल शर्तों पर बातचीत करने की आवश्यकता हो सकती है।
संक्षेप में: CloudFlare बहुत विचार की रक्षा करना चाहता है कि सामग्री का मूल्य है। अपनी वेबसाइट के लिए एक बड़े पैमाने पर, बुद्धिमान सुरक्षा गार्ड और एक्सप्रेस डिलीवरी सेवा के रूप में CloudFlare के बारे में सोचें। जब कोई आपकी साइट तक पहुंचने की कोशिश करता है, तो उनका अनुरोध अक्सर क्लाउडफ्लेयर के वैश्विक नेटवर्क के माध्यम से होता है। CloudFlare तब दुर्भावनापूर्ण ट्रैफ़िक को ब्लॉक कर सकता है, सामग्री वितरण को गति दे सकता है, और, महत्वपूर्ण रूप से, एआई क्रॉलर की तरह विशिष्ट प्रकार के स्वचालित बॉट्स की पहचान और नियंत्रण कर सकता है, इससे पहले कि वे कभी भी आपकी वेबसाइट के वास्तविक सर्वर तक पहुंचते हैं। उभरती हुई एआई आर्म्स रेस में, जो क्लाउडफ्लेयर को इंटरनेट पर सबसे महत्वपूर्ण द्वारपालों में से एक बनाता है।
