Google भी OpenAI के साथ, robots.txt में AI ट्रेनिंग रोकने का नया नियम

Google ने घोषणा की है कि वह OpenAI, Anthropic और Microsoft के साथ robots.txt फ़ाइल में जोड़े जा रहे एक नए निर्देश का समर्थन करेगा। इसका मक़सद वेबसाइट मालिकों को यह तय करने का ज़्यादा अधिकार देना है कि उनका कंटेंट जनरेटिव AI मॉडलों की ट्रेनिंग में इस्तेमाल हो या नहीं।

एक ही संकेत, अलग-अलग नियम नहीं

अब तक पब्लिशर्स को हर कंपनी के क्रॉलर के लिए अलग नियम लिखने पड़ते थे। नए प्रस्ताव में एक साझा संकेत होगा, जिसे हिस्सा लेने वाली कंपनियाँ पहचानेंगी और मानेंगी।

वेबसाइट मालिक एक विशेष यूज़र एजेंट के ज़रिये बता सकेंगे कि कौन-से पेज या सेक्शन AI ट्रेनिंग के लिए इस्तेमाल न हों। साथ ही साइट के चुनिंदा हिस्सों, जैसे समाचार पेज या प्रकाशन के लिए तैयार सामग्री, तक पहुँच की अनुमति भी दी जा सकती है।

कंपनियों के मुताबिक़ यह निर्देश सर्च रिज़ल्ट में वेबसाइट के दिखने पर असर नहीं डालता। यह केवल AI मॉडल की ट्रेनिंग के लिए होने वाले डेटा संग्रह पर लागू होता है। Google इस संकेत को Google-Extended यूज़र एजेंट के लिए निर्देश मानेगा, जो Gemini मॉडलों की ट्रेनिंग से जुड़ी सामग्री जुटाता है।

2027 में चरणबद्ध लागू

Anthropic ने नए निर्देश का समर्थन शुरू कर दिया है। Microsoft इसे 1 फ़रवरी 2027 से लागू करने की योजना बना रही है। Google के 2027 की शुरुआत में समर्थन शुरू करने की उम्मीद है, जबकि OpenAI का कहना है कि वह आने वाले महीनों में यह व्यवस्था लागू करेगी।

निर्देश उस डेटा को प्रभावित नहीं करेगा जो कंपनियाँ पहले ही इकट्ठा कर चुकी हैं। यह केवल भविष्य में होने वाले कंटेंट संग्रह को नियंत्रित करता है। फिर भी इसे AI कंपनियों और पब्लिशर्स के रिश्तों में अहम कदम माना जा रहा है, क्योंकि कंटेंट मालिक अपने काम के इस्तेमाल पर ज़्यादा नियंत्रण की माँग लगातार कर रहे हैं।