AI के बेहतर होने के साथ यह जानना महत्वपूर्ण है कि क्या लोग पहचान सकते हैं कि कोई टेक्स्ट AI द्वारा तैयार किया गया है। इस बारे में अधिक जानने के लिए हमने छह अलग-अलग अध्ययनों की समीक्षा की।
क्या लोग बता सकते हैं कि कोई टेक्स्ट AI द्वारा तैयार किया गया है?
कुछ लोगों को लगता है कि वे ऐसा कर सकते हैं, लेकिन अन्य लोग Bypass Engine जैसे टूल्स पर भरोसा करते हैं।
AI टेक्स्ट को पहचानने या न पहचानने के बड़े प्रभावों को देखते हुए यह जानना महत्वपूर्ण है कि क्या लोग AI द्वारा लिखे गए कंटेंट को पहचान सकते हैं। इस सवाल पर गौर करने के लिए हमने छह अलग-अलग अध्ययनों की जाँच की।
मुख्य बातें (संक्षिप्त संस्करण)
- अपनी क्षमताओं पर भरोसा होने के बावजूद, लोगों के लिए AI-निर्मित टेक्स्ट को पहचानना अक्सर मुश्किल होता है।
- AI डिटेक्टर, लोगों की तुलना में AI टेक्स्ट को पहचानने में कहीं बेहतर काम करते हैं।
- AI टेक्स्ट को पहचान न पाना गलत जानकारी, स्कूल में नकल और ऑनलाइन नकली सामग्री जैसी समस्याओं का कारण बन सकता है।
क्या लोग AI द्वारा लिखे टेक्स्ट को पहचान सकते हैं? 6 अध्ययनों का विस्तृत विश्लेषण
हालाँकि कई लोगों को इस बारे में पूरा भरोसा होता है, लेकिन आम तौर पर उनके लिए AI द्वारा लिखे शब्दों को पहचानना मुश्किल होता है। ChatGPT से जुड़े आम शब्दों पर हमारी जाँच से पता चला कि ChatGPT की पहचान करना उम्मीद से कहीं अधिक कठिन है।
इसे और गहराई से समझने के लिए, हम AI द्वारा लिखे टेक्स्ट को पहचानने की लोगों की क्षमता पर किए गए छह अन्य अध्ययनों का विश्लेषण कर रहे हैं।
1. क्या शिक्षक AI को पहचान सकते हैं? छात्र निबंधों में AI द्वारा लिखे टेक्स्ट को पहचानने की शिक्षकों की क्षमता का अध्ययन।
अध्ययन का सारांश
ScienceDirect पर उपलब्ध इस अध्ययन में देखा गया है कि शिक्षक AI द्वारा बनाई गई सामग्री को पहचानने में कितने सक्षम हैं।
AI के बेहतर होते जाने के साथ शिक्षा में AI द्वारा लिखी सामग्री को पहचानना बेहद ज़रूरी है। इसलिए शोधकर्ताओं ने यह पता लगाने के लिए परीक्षण किए कि क्या शिक्षक AI द्वारा लिखे और इंसानों द्वारा लिखे टेक्स्ट के बीच अंतर कर सकते हैं।
अध्ययन में प्रतिभागियों के दो समूह थे:
अध्ययन 1 (प्रतिभागी भावी शिक्षक थे)
“भविष्य के शिक्षकों ने AI द्वारा लिखे गए केवल 45.1% और छात्रों द्वारा लिखे गए 53.7% टेक्स्ट की सही पहचान की।”
अध्ययन 2 (प्रतिभागी अनुभवी शिक्षक थे)
“वे AI द्वारा बनाए गए टेक्स्ट में से केवल 37.8% को सही ढंग से पहचान पाए, लेकिन छात्रों द्वारा लिखे गए टेक्स्ट में से 73.0% की सही पहचान की।”
मुख्य बातें:
- प्रतिभागियों के लिए AI द्वारा लिखी सामग्री और इंसानों द्वारा लिखी सामग्री में लगातार अंतर कर पाना मुश्किल रहा।
- सेवा-पूर्व शिक्षक AI टेक्स्ट में से केवल 45.1% को सही पहचान पाए।
- अनुभवी शिक्षकों ने AI टेक्स्ट में से केवल 37.8% की सही पहचान की।
- प्रतिभागियों को पूरा भरोसा होने पर भी वे अक्सर गलत साबित हुए, जिससे पता चलता है कि उन्होंने AI को पहचानने की अपनी क्षमता को ज़्यादा आँका।
निष्कर्ष:
इन निष्कर्षों से पता चलता है कि शीर्ष AI डिटेक्शन टूल्स की मदद के बिना शिक्षकों के लिए AI द्वारा बनाए गए काम और इंसानों द्वारा लिखे काम में अंतर करना मुश्किल होता है।
अध्ययन: क्या शिक्षक AI को पहचान सकते हैं? छात्र निबंधों में AI द्वारा बनाए गए टेक्स्ट को पहचानने की शिक्षकों की क्षमता की जाँच।
2. हर ‘मानवीय’ चीज़ सोना नहीं होती: AI टेक्स्ट के मानवीय मूल्यांकन का आकलन
अध्ययन का सारांश
Cornell University में उपलब्ध एक अध्ययन में शोधकर्ताओं ने देखा कि लोग यह पहचानने में कितने सक्षम हैं कि कोई सामग्री AI ने लिखी है या इंसानों ने।
उन्होंने कहानियों, समाचार लेखों और रेसिपी की जाँच की।
अध्ययन के लिए उन्होंने सोशल मीडिया की 255 कहानियों का विश्लेषण किया। इनमें से उन्होंने इंसानों द्वारा लिखी 50 कहानियाँ चुनीं। उन्होंने प्रॉम्प्ट का इस्तेमाल करके 50 और कहानियाँ भी तैयार कीं।
उन्होंने 15 समाचार माध्यमों के 2,111 समाचार लेखों की समीक्षा की। इनमें से उन्होंने 50 लेख चुने। फिर उन्होंने प्रॉम्प्ट के ज़रिए 50 और लेख तैयार किए।
उन्होंने RecipeNLG डेटासेट से इंसानों द्वारा लिखी 50 रेसिपी शामिल कीं, साथ ही प्रॉम्प्ट के ज़रिए बनाई गई 50 और रेसिपी भी शामिल कीं।
मुख्य निष्कर्ष
निष्कर्षों से पता चला कि लोगों के लिए AI द्वारा बनाई गई सामग्री को पहचानना अक्सर मुश्किल होता है।
GPT2 टेक्स्ट और इंसानों द्वारा लिखे टेक्स्ट की तुलना करते समय लोगों ने 57.9% बार सही अनुमान लगाया, जिसे अध्ययन की तालिका में 58% तक पूर्णांकित किया गया था।
GPT3 की बात करें तो उनकी सटीकता 49.9% थी, जिसे 50% तक पूर्णांकित किया गया।
परीक्षण से पहले प्रतिभागियों को AI सामग्री पहचानने का कुछ प्रशिक्षण दिए जाने पर भी उनके स्कोर में केवल थोड़ी-सी बढ़ोतरी हुई, और वह भी बहुत ज़्यादा नहीं।
नतीजे बताते हैं कि पहले से प्रशिक्षण मिलने के बावजूद लोगों के लिए AI द्वारा बनाए गए टेक्स्ट को पहचानना मुश्किल होता है।
तीसरे पक्ष के शोधकर्ताओं द्वारा किए गए मेटा-विश्लेषण के आधार पर जानें कि AI डिटेक्टर कितने सटीक होते हैं। इस विश्लेषण में AI पहचान की सटीकता से जुड़े अध्ययनों की जाँच की गई।
शोध: हर ‘मानवीय’ चीज़ चमकती नहीं: जनरेट किए गए टेक्स्ट के मानवीय आकलन का मूल्यांकन
3. अध्ययन: लोगों के लिए GPT-4 और इंसान के बीच अंतर करना मुश्किल है
शोध का सारांश
Cornell University द्वारा साझा किया गया यह शोध बताता है कि लोग AI द्वारा बनाए गए टेक्स्ट को कितनी अच्छी तरह पहचान सकते हैं। इसमें तीन मॉडल शामिल थे: GPT-4, GPT-3.5 और ELIZA।
इस अध्ययन का उद्देश्य यह जानना था कि लोग AI द्वारा लिखी गई सामग्री को पहचान सकते हैं या नहीं। इसमें 500 लोगों ने भाग लिया और उनकी क्षमता परखने के लिए चैट ऐप जैसे एक ‘गेम’ का इस्तेमाल किया गया।
अध्ययन में यह भी देखा गया कि AI के बारे में जानकारी या बड़े भाषा मॉडल (LLMs) से परिचित होने से लोगों के प्रदर्शन पर क्या असर पड़ा।
प्रमुख निष्कर्ष
- पिछले अध्ययनों की तरह, इस शोध से भी पता चला कि लोग आमतौर पर AI द्वारा लिखे गए टेक्स्ट और इंसान द्वारा लिखे गए टेक्स्ट में अंतर नहीं कर सके।
- इंसान द्वारा लिखे गए टेक्स्ट को 67% मामलों में सही ढंग से इंसानी टेक्स्ट के रूप में पहचाना गया।
- GPT-4 को 54% मामलों में गलती से इंसान द्वारा लिखा हुआ माना गया।
- ELIZA को 22% मामलों में इंसान द्वारा लिखा हुआ समझ लिया गया।
- LLMs के बारे में जानकारी की बात करें, तो इस परिचय ने लोगों की सटीकता को थोड़ा प्रभावित किया।
- दिलचस्प बात यह है कि सटीकता में उम्र की भूमिका सबसे अधिक रही।
- आमतौर पर युवा लोग, उम्रदराज़ लोगों की तुलना में, AI मॉडल पहचानने में बेहतर थे।
सारांश
लोग अक्सर यह नहीं पहचान पाते कि टेक्स्ट AI द्वारा बनाया गया है, भले ही उन्हें उस विषय की जानकारी हो।
AI की पहचान के बारे में और जानना चाहते हैं? Bypass Engine Content Detector Accuracy Review देखें।
अध्ययन: Turing test में लोग GPT-4 और इंसान के बीच अंतर नहीं कर पाए।
4. क्या आप बता सकते हैं कि यह बॉट है? कॉलेज निबंधों में AI द्वारा लिखी गई सामग्री की पहचान
अध्ययन का सारांश
The International Journal for Educational Integrity ने शैक्षणिक कार्यों में AI द्वारा लिखी गई सामग्री की पहचान करने के तरीके का गहराई से अध्ययन किया। वे जानना चाहते थे कि लोग AI द्वारा लिखे गए निबंधों और इंसानों द्वारा लिखे गए निबंधों में अंतर कर सकते हैं या नहीं।
इस अध्ययन में 140 कॉलेज शिक्षकों और 145 कॉलेज छात्रों ने भाग लिया। प्रत्येक व्यक्ति को एक छात्र द्वारा लिखा गया निबंध और एक AI द्वारा लिखा गया निबंध दिया गया। उन्हें तय करना था कि कौन-सा निबंध AI ने बनाया था और कौन-सा छात्र ने लिखा था।
प्रमुख जानकारियाँ
- प्रतिभागियों के लिए AI द्वारा लिखे गए निबंधों में अंतर करना मुश्किल था।
- कॉलेज शिक्षक ChatGPT के मामले में 70% बार सही पहचान कर पाए।
- छात्र ChatGPT के मामले में 60% बार सही पहचान कर पाए।
निष्कर्ष
शिक्षकों और छात्रों, दोनों के लिए शैक्षणिक कार्यों में AI की पहचान करना मुश्किल है।
अध्ययन: बॉट पहचानें? कॉलेज निबंधों में AI की पहचान
5. शोल्डर और एल्बो सर्जरी के ChatGPT द्वारा बनाए गए सारांशों की पहचान करना समीक्षकों के लिए मुश्किल है
अवलोकन
Arthroscopy: The Journal of Arthroscopic & Related Surgery में प्रकाशित यह अध्ययन जांचता है कि समीक्षक ChatGPT द्वारा बनाए गए सारांशों की कितनी अच्छी तरह पहचान कर सकते हैं।
अध्ययन में प्रतिभागियों को कुछ AI द्वारा और कुछ इंसानों द्वारा बनाए गए सारांशों का मिश्रण दिया गया। उन्हें तय करना था कि इनमें से कौन-से सारांश उन्हें AI द्वारा बनाए गए लगते हैं।
मुख्य निष्कर्ष
समीक्षक 62% मामलों में AI द्वारा बनाई गई सामग्री की सही पहचान कर पाए। हालांकि, 38% मामलों में उन्होंने गलती से इंसानों द्वारा लिखे गए सारांशों को AI द्वारा बनाया हुआ समझ लिया। इससे पता चलता है कि केवल मानवीय निर्णय पर निर्भर रहना पर्याप्त नहीं है और AI की पहचान के लिए अन्य तरीकों की आवश्यकता होती है।
निष्कर्ष
यह अध्ययन भी अन्य अध्ययनों की तरह दिखाता है कि लोगों के लिए AI द्वारा बनाई गई सामग्री की पहचान करना चुनौतीपूर्ण है।
6. क्या ChatGPT सिस्टम को मात दे सकता है? प्लास्टिक सर्जरी रेज़िडेंसी आवेदनों में AI और इंसानों द्वारा लिखे गए व्यक्तिगत वक्तव्यों की तुलना
अध्ययन का सारांश
यह अध्ययन Canadian Society of Plastic Surgeons की ओर से किया गया है। इसमें मेडिकल रेज़िडेंसी आवेदनों की सामग्री का अध्ययन किया गया है, जो एक बेहद विशेषज्ञता वाला क्षेत्र है।
इस अध्ययन में दो सर्जनों ने भाग लिया, जो Canadian Residency Matching Service (CaRMS) के साथ 20 वर्षों तक काम करने के बाद हाल ही में सेवानिवृत्त हुए थे। उन्हें AI द्वारा लिखे गए 11 और इंसानों द्वारा लिखे गए 11 आवेदनों की समीक्षा करनी थी। उनका काम यह पता लगाना था कि कौन-से आवेदन ChatGPT-4 ने बनाए थे और कौन-से इंसानों ने लिखे थे।
मुख्य निष्कर्ष
अध्ययन में पाया गया कि मूल्यांकनकर्ता 65.9% मामलों में AI और इंसानों द्वारा लिखे गए आवेदनों में अंतर कर सके। शोधपत्र में बताया गया कि नमूनों की संख्या कम होना एक कमी थी, लेकिन मूल्यांकनकर्ताओं की विशेषज्ञता एक महत्वपूर्ण लाभ थी।
निष्कर्ष
नतीजे बताते हैं कि लोगों के लिए AI-जनित सामग्री पहचानना मुश्किल है। मेडिकल रेज़िडेंसी आवेदनों के क्षेत्र में 20 से अधिक वर्षों का अनुभव रखने वाले विशेषज्ञों को भी मानव-लिखित और AI-लिखित आवेदनों में अंतर करना कठिन लगता है।
निष्कर्ष
क्या लोग AI द्वारा तैयार किए गए टेक्स्ट को पहचान सकते हैं? इन अध्ययनों से पता चलता है कि वे ऐसा नहीं कर सकते।
लोग कभी-कभी सही पहचान लेते हैं, लेकिन ज़्यादातर के लिए AI टेक्स्ट और मानव-लिखित टेक्स्ट में अंतर करना मुश्किल होता है। इसलिए, अधिक स्पष्टता के लिए एक अच्छा AI टेक्स्ट डिटेक्टर बहुत उपयोगी है।
AI डिटेक्शन से जुड़े अक्सर पूछे जाने वाले सवाल
क्या लोग AI द्वारा बनाई गई सामग्री पहचान सकते हैं?
आम तौर पर, लोगों के लिए यह पहचानना कठिन होता है कि सामग्री AI द्वारा बनाई गई है। शोध से पता चलता है कि इसे पहचानने की लोगों की क्षमता काफी अलग-अलग होती है।
AI डिटेक्शन टूल कितने सटीक होते हैं?
इन टूल की सफलता दर इस बात पर निर्भर करती है कि आप किस टूल का इस्तेमाल करते हैं। Bypass Engine AI Checker 99% से अधिक सटीकता का दावा करता है। इसके अलावा, Turbo मॉडल भी AI-जनित सामग्री की पहचान करने में 99% से अधिक सटीकता का दावा करता है।
लोकप्रिय AI टूल की तुलना के लिए, आप हमारी AI डिटेक्शन समीक्षा शृंखला देख सकते हैं।
अगर हम AI सामग्री की पहचान न कर पाएं, तो क्या होगा?
इससे बड़ी समस्याएं पैदा हो सकती हैं, जैसे गलत जानकारी फैलना, स्कूल में नकल करना और ऑनलाइन पढ़ी जाने वाली चीज़ों पर से भरोसा उठ जाना।
