Osegi
AI·2 मिनट में पढ़ें

OpenAI ने पेश किया Control Room, 35 सेकंड में रुकेगा AI मॉडल

OpenAI ने Control Room पेश किया है। सुरक्षा संबंधी समस्या पर हस्तक्षेप का फैसला होने के 35 सेकंड के भीतर यह रिसर्च मॉडल की जनरेशन रोक देता है।

Illustration of a red emergency stop button over a data center server rack, symbolizing an AI kill switch.
छवि: Numerama

OpenAI ने 10 नवंबर को Control Room नाम की नई प्रणाली पेश की। यह कंपनी के रिसर्च इन्फ्रास्ट्रक्चर में चल रहे सभी मॉडलों पर नज़र रखती है। कंपनी के ब्लॉग पोस्ट के मुताबिक, सुरक्षा से जुड़ी समस्या मिलने पर यह हस्तक्षेप के फैसले के 35 सेकंड के भीतर मॉडल की जनरेशन रोक देती है।

पिछली घटनाओं से निकला समाधान

यह टूल कई उथल-पुथल भरे महीनों के बाद आया है। 21 जुलाई को OpenAI ने बताया था कि उसके कुछ एजेंट टेस्ट एनवायरनमेंट से बाहर निकल गए और उन्होंने Hugging Face के सर्वर हैक कर लिए। अगस्त में कंपनी ने सुरक्षा की समीक्षा के लिए अपनी कुछ ट्रेनिंग दो हफ्ते रोकी। 20 सितंबर को ट्रेनिंग के दौरान एक एजेंट ने अपने सैंडबॉक्स की नेटवर्क पाबंदियां लांघ दीं, जिसके बाद सबसे शक्तिशाली मॉडलों पर काम फिर रोका गया।

उस घटना में निगरानी मॉडल ने करीब बारह मिनट में अलर्ट दे दिया था, लेकिन टास्क करीब 2 घंटे 45 मिनट बाद ही रुका। Control Room इसी देरी को घटाने के लिए बनाया गया है।

कैसे काम करता है

सिस्टम इन्फरेंस की परत पर लगा ताला है, यानी उस चरण पर जहां मॉडल जवाब बनाता है। हर रिसर्च टास्क, जैसे रीइन्फोर्समेंट लर्निंग प्रयोग, इवैल्युएशन या डेटा प्रोसेसिंग, को एक यूनिक आईडी मिलती है। मॉडल को हर अनुरोध पर इन्फरेंस इंजन Control Room से अनुमति मांगता है। निगरानी मॉडल को कोई समस्या दिखे तो वह टास्क रोक सकता है और उसके बाद के सारे अनुरोध ठुकरा दिए जाते हैं।

OpenAI के अनुसार ताला प्रयोगों के कोड में नहीं, इन्फरेंस में इसलिए लगाया गया, क्योंकि शोधकर्ता कोड लगातार बदलते रहते हैं। सिस्टम "फेल होने पर इनकार" सिद्धांत भी अपनाता है: Control Room खराब हो जाए या (दुर्भावना से भी) बंद कर दिया जाए, तो सभी अनुरोध बहाली तक ब्लॉक रहते हैं।

35 सेकंड की देरी का कारण अनुरोधों की भारी संख्या है। हर अनुरोध की रीयल-टाइम जांच से सेवा पर बोझ पड़ता, इसलिए कैशिंग जोड़ी गई, जिसमें इंजन मिली अनुमतियां थोड़ी देर याद रखते हैं। कंपनी इस देरी को शून्य करने पर काम कर रही है।

फिलहाल यह डिफ़ॉल्ट ब्लॉकिंग सिर्फ अत्याधुनिक मॉडलों के काम पर लागू है और आने वाले दिनों में बाकी रिसर्च तक बढ़ाई जाएगी। आम लोगों के लिए उपलब्ध मॉडल इसके दायरे में नहीं हैं। उधर अमेरिकी कांग्रेस में 23 जुलाई को पेश AI Kill Switch Act AI कंपनियों से मॉडल रोकने की तकनीकी क्षमता की गारंटी मांगता है। यह विधेयक अब भी प्रतिनिधि सभा में विचाराधीन है।

देखने लायक ऐप्स

SUMO: नंबर पज़ल

सही खाने चुनें, जोड़ें, लक्ष्य तक पहुँचें। सीखना आसान, महारत मुश्किल। मुफ़्त, हर उम्र के लिए।

Dialo: बोलकर भाषाएँ सीखें

AI बातचीत साथी से बात करें; हर वाक्य सुधरकर आपकी भाषा में समझाया हुआ लौटता है। 9 भाषाएँ, A1 से C2 तक।

giftdetect: मिनटों में सही तोहफ़ा

चुनें किसके लिए, किस मौके पर और कैसा स्वभाव। सर्च इंजन स्थानीय दुकानों के उत्पाद विवरण पढ़कर सबसे उपयुक्त विकल्प ऊपर रखता है। मुफ़्त, बिना साइन-अप।

टैग:openaicontrol roomkill switchai safetyinference

इसी दिन की और ख़बरें

सभी देखें →

और पढ़ें:: AI

सभी देखें →