मेटा ने मेटा एआई के लिए एक नई सुरक्षा परत पेश की है, जिससे माता-पिता को सूचित किया जा सके यदि किशोरों की कृत्रिम बुद्धिमत्ता के साथ बातचीत में आत्महत्या या आत्म-नुकसान के विचार के संकेत मिलते हैं।
मेटा ने मेटा एआई के लिए एक नई सुरक्षा परत पेश की है, जिससे माता-पिता को सूचित किया जा सके यदि किशोरों की कृत्रिम बुद्धिमत्ता के साथ बातचीत में आत्महत्या या आत्म-नुकसान के विचार के संकेत मिलते हैं।
यह उपाय युवाओं की गोपनीयता की रक्षा की आवश्यकता और परिवार के सदस्यों को खतरे के समय सहायता प्रदान करने के लिए महत्वपूर्ण जानकारी प्राप्त करने की संभावना के बीच तालमेल बिठाने का लक्ष्य रखता है। यह सुविधा उन माता-पिता के लिए उपलब्ध होगी जो इंस्टाग्राम द्वारा प्रदान किए गए निगरानी कार्यों का उपयोग करते हैं।
जब मेटा एआई किसी ऐसी बातचीत का पता लगाता है जो संभावित जोखिम का सुझाव देती है, तो अभिभावकों को विशेषज्ञों द्वारा प्रदान किए गए मार्गदर्शन के साथ एक सूचना प्राप्त होती है। मेटा स्पष्ट करती है कि सिस्टम को स्पष्ट उल्लेखों और भावनात्मक संकट के अधिक सूक्ष्म संकेतों दोनों को पहचानने के लिए डिज़ाइन किया गया है। यह ध्यान रखना महत्वपूर्ण है कि किसी भी अलर्ट को ट्रिगर करने से पहले, चिह्नित बातचीत की मानवीय जांच की जाती है।
यदि किशोर का इरादा पूरी तरह से स्पष्ट नहीं है, तो कंपनी एक निवारक रुख अपनाती है, और माता-पिता से संपर्क कर सकती है ताकि यह सुनिश्चित हो सके कि जोखिम की स्थिति अनसुनी न रहे। इन अलर्ट के ट्रिगर में खुद को चोट पहुँचाने की इच्छा के बारे में प्रत्यक्ष या अप्रत्यक्ष टिप्पणियाँ, तीव्र भावनात्मक पीड़ा से संबंधित संवाद, मेटा सिस्टम द्वारा पहचाने गए संकेत, या ऐसी स्थितियाँ शामिल हैं जहाँ युवा को डिजिटल वातावरण के बाहर समर्थन की आवश्यकता होती है।
कंपनी इस बात पर जोर देती है कि यह सुविधा पेशेवर निगरानी या पारिवारिक संवाद का स्थान नहीं लेती है, बल्कि यह अभिभावकों को ऐसे संकेतों की पहचान करने में मदद करती है जिन्हें नजरअंदाज किया जा सकता है।
पारिवारिक चेतावनियों के अतिरिक्त, मेटा ने एक कार्यक्षमता विकसित की है जो मेटा एआई के साथ बातचीत से तत्काल आत्महत्या के जोखिम का संकेत मिलने पर आपातकालीन सेवाओं को सक्रिय कर सकती है, जो किशोरों और वयस्कों दोनों पर लागू होती है। यह कार्रवाई फेसबुक और इंस्टाग्राम पर पहले से उपयोग किए जा रहे मॉडल का अनुसरण करती है, जहां पिछले वर्ष में आत्महत्या के जोखिम वाली पोस्ट का पता चलने के बाद आपातकालीन सेवाओं के लिए 19 हजार से अधिक रेफरल हुए थे।
कृत्रिम बुद्धिमत्ता के प्रदर्शन को परिष्कृत करने के लिए, मेटा ने किशोर मानसिक स्वास्थ्य में विशेषज्ञता रखने वाले 75 से अधिक पेशेवरों से परामर्श किया। इन विशेषज्ञों ने सैकड़ों प्रतिक्रियाओं की समीक्षा की और सिस्टम की उपयुक्तता को अनुकूलित करने के लिए समायोजन प्रस्तावित किए।
किशोर खातों पहले से ही 13 वर्ष या उससे अधिक आयु के उपयोगकर्ताओं के लिए स्वचालित सामग्री कॉन्फ़िगरेशन के साथ काम करते हैं, जो मेटा एआई को यौन या रोमांटिक प्रकृति की बातचीत में शामिल होने से रोकता है और शराब के पेय पदार्थों की रेसिपी प्रदान करने पर रोक लगाता है। इसके अलावा, इंस्टाग्राम का सबसे प्रतिबंधात्मक विकल्प, 'सीमित सामग्री' मोड, एआई सहायक के साथ इंटरैक्शन को कवर करने के लिए विस्तारित किया जाएगा, जिससे माता-पिता को किशोरों के लिए उपलब्ध इंटरैक्शन के प्रकारों पर अधिक नियंत्रण मिलेगा।
जी-योन ली, एक मनोवैज्ञानिक जिन्होंने सिस्टम प्रतिक्रियाओं के विश्लेषण में सहयोग किया, ने इस बात पर प्रकाश डाला कि यह विशेषज्ञ मूल्यांकन उपकरण में सुधार के लिए मौलिक था, यह कहते हुए कि 'विशेषज्ञों और परिदृश्यों पर आधारित इस प्रकार का शोधन किशोरों के लिए एआई के साथ अनुभवों को सुरक्षित बनाने के लिए आवश्यक है'।
ये नए अलर्ट पहले से ही संयुक्त राज्य अमेरिका, यूनाइटेड किंगडम, ऑस्ट्रेलिया और कनाडा में इंस्टाग्राम की निगरानी का उपयोग करने वाले माता-पिता के लिए सक्रिय हैं, और मेटा वर्ष के अंत तक अन्य देशों में इस कार्यक्षमता का विस्तार करने की योजना बना रही है।
ऑस्ट्रेलिया में सोशल मीडिया पर खाता बनाना नए कानून की अपेक्षा से अधिक आसान बना हुआ है। रॉयटर्स की रिपोर्ट के अनुसार, एक अध्ययन ने प्लेटफॉर्म द्वारा लागू किए गए आयु सत्यापन के पहले चरण में ही कमियों का पता लगाया है।
परीक्षण के परिणामों से पता चला कि 16 वर्ष के उपयोगकर्ताओं के रूप में पंजीकृत प्रोफाइल बिना किसी आयु प्रमाणन के सक्रिय हो गए, जो अपनाए गए उपायों की प्रभावशीलता पर सवाल उठाता है। दिसंबर से, इंस्टाग्राम, स्नैपचैट, टिकटॉक और यूट्यूब जैसे सोशल सेवाओं को 16 वर्ष से कम उम्र के व्यक्तियों द्वारा खाते बनाने को रोकने के लिए बाध्य किया गया है। कानून कंपनियों से उपयोगकर्ताओं की आयु सत्यापित करने के लिए विभिन्न तरीकों का उपयोग करने की मांग करता है।
हालांकि, किए गए परीक्षणों से पता चला कि प्रारंभिक नियंत्रण ठीक से काम नहीं कर रहा है। शोधकर्ताओं ने कानून के दायरे में आने वाले दस में से नौ प्लेटफॉर्म पर 50 प्रोफाइल बनाए। इन सभी प्रोफाइल में 16 वर्ष की आयु बताई गई थी, और इनमें से किसी को भी अपनी आयु का प्रमाण देने की आवश्यकता नहीं थी।
अध्ययन के अनुसार, समस्या छवि-आधारित जांच से पहले ही उत्पन्न होती है। प्राथमिक स्क्रीनिंग को उपयोगकर्ता की ऑनलाइन गतिविधि के आधार पर उसकी आयु का आकलन करना चाहिए और संदिग्ध मामलों को अधिक गहन जांच के लिए निर्देशित करना चाहिए। टेस्टिंग कंपनी KJR के निदेशक, एंड्रयू हैमंड, जिन्होंने 2025 में मूल परीक्षण किया था, ने कहा: 'आयु प्रमाणन का अनुरोध किया जाना चाहिए था, लेकिन हमें कभी भी अपनी आयु की जांच करने या कोई आयु सत्यापन उपाय उपयोग करने के लिए नहीं कहा गया।'
बनाए गए खाते पूरे परीक्षण अवधि के दौरान सक्रिय रहे। उनमें से कुछ को युवा दर्शकों पर लक्षित विज्ञापन प्राप्त हुए, जो दर्शाता है कि प्लेटफॉर्म ने बताए गए आयु को पहचाना था। एक अन्य मामले में, एक्स नेटवर्क पर बनाए गए प्रोफ़ाइल को अश्लील सामग्री के संपर्क में लाया गया। मूल्यांकन किए गए सभी सेवाओं में से केवल किक ने खाता पंजीकरण से पहले सत्यापन की मांग की।
अध्ययन के मुख्य निष्कर्षों में शामिल हैं: पंजीकरण के बाद 50 खाते सक्रिय रहे; केवल किक ने आयु सत्यापन के बिना पंजीकरण को अवरुद्ध किया; परीक्षण खातों को युवाओं के लिए लक्षित विज्ञापन मिले; और एक्स नेटवर्क पर एक प्रोफ़ाइल अश्लील सामग्री का सामना कर रही थी। रॉयटर्स के जवाब में मेटा ने कहा कि परीक्षण नियामक प्राधिकरण के निर्देशों का पूरी तरह से पालन नहीं करता था। कंपनी के अनुसार, आधिकारिक आयु सत्यापन तब होता है जब व्यवहारिक संकेतक इंगित करते हैं कि उपयोगकर्ता नाबालिग हो सकता है, या जब खाते पर शिकायत प्राप्त होती है।
परियोजना के दौरान सलाहकारों ने इस बात पर जोर दिया कि परीक्षणों में किशोरों के बीच विशिष्ट स्थितियों का अनुकरण भी किया जाना चाहिए, जैसे कि प्रतिबंधों को दरकिनार करने के लिए गलत जन्मतिथि प्रदान करना। ऑस्ट्रेलिया में लापता और शोषित बच्चों के अंतर्राष्ट्रीय केंद्र के सीईओ, कोल गैनन ने रॉयटर्स को दिए साक्षात्कार में टिप्पणी की कि जो अभी देखा जा रहा है वह यह है कि प्रतिबंधों को दरकिनार करना युवाओं के लिए पसंदीदा रणनीति बन गया है।
ऑस्ट्रेलियाई नियामक निकाय आश्वस्त है कि क्रमिक जांच पहचानी गई कमियों को कम कर सकती है। अगले परीक्षण दौरों को यह प्रदर्शित करना चाहिए कि क्या प्लेटफॉर्म खोजी गई कमियों को दूर कर सकते हैं।