AI Detection

कौन-से विश्वविद्यालयों ने Turnitin के AI Detector का उपयोग बंद किया

Vanderbilt, Michigan State और UT Austin ने Turnitin के AI लेखन संकेतक को बंद करने के अपने-अपने कारण प्रकाशित किए हैं। इनमें से किसी ने भी Turnitin को पूरी तरह नहीं छोड़ा। यहाँ अंतर, उसके पीछे का गणित, और वे अन्य नाम दिए गए हैं जो किसी संस्था के अपने पृष्ठ से पुष्टि के बिना बार-बार दोहराए जाते हैं।

5 min
Universities that stopped using Turnitin's AI detector: Vanderbilt, Michigan State and UT Austin opt-out timeline

Turnitin की AI-detection सुविधा का उपयोग बंद करने वाले विश्वविद्यालयों की सूची खोज परिणामों से दिखने की तुलना में छोटी है, और बेहतर दस्तावेज़ित भी है। तीन अमेरिकी संस्थानों, Vanderbilt University, Michigan State University और the University of Texas at Austin, ने अपनी-अपनी पृष्ठ प्रकाशित की हैं जो पुष्टि करती हैं कि उन्होंने इस सुविधा को बंद किया, और उन्होंने अपने कारण अपने ही शब्दों में बताए हैं। इन तीनों में से किसी ने भी Turnitin को स्वयं नहीं छोड़ा।

अंतिम वाक्य वह हिस्सा है जिसे अधिकांश संक्षिप्त विवरण छोड़ देते हैं। Turnitin एक ही इंटरफ़ेस में दो उत्पाद प्रदान करता है, एक similarity checker जो छात्र-लेखों की तुलना एक पाठ डेटाबेस से करता है, यह एक ऐसी सेवा है जो generative AI के आविष्कार से बहुत पहले से उपलब्ध रही है, और एक AI writing indicator, एक classifier जो किसी लेख के गद्य को इस आधार पर अंक देता है कि वह मशीन-निर्मित आउटपुट से कितना मिलता-जुलता है। यह नई सुविधा अप्रैल 2023 में चालू हुई। नीचे सूचीबद्ध प्रत्येक संस्थान ने केवल दूसरे उत्पाद को बंद किया।

आगे तीन विश्वविद्यालयों द्वारा अपने ही शब्दों में दिए गए तर्क प्रस्तुत हैं, दो और नाम हैं जिन्हें प्रेस कवरेज दोहराती है, लेकिन जिनकी पुष्टि के लिए किसी संस्थान-स्वामित्व वाली पृष्ठ का अभाव है, और यह भी कि जब कोई प्रशासक यह निर्णय लेता है, तो वास्तव में वह क्या बदल रहा होता है।

क्या किसी विश्वविद्यालय ने Turnitin का उपयोग पूरी तरह बंद किया?

ऐसा कोई पुष्ट मामला मौजूद नहीं है। दस्तावेज़ित हर उदाहरण में एक विश्वविद्यालय किसी उत्पाद के भीतर एक विशिष्ट सेटिंग को निष्क्रिय कर रहा है, जबकि उस उत्पाद का उपयोग वह अन्यथा जारी रखता है। Turnitin का अपना मार्गदर्शन बताता है कि यह अंतर संभव ही क्यों है, प्रशासकों के पास "अपने admin settings page से AI writing feature को enable/disable करने का विकल्प होता है," और ऐसा करने पर "Similarity report से AI writing indicator और report हटा दिए जाएंगे," जबकि similarity report स्वयं चलती रहती है।

Similarity Score और AI Score, Turnitin के अपने शब्दों में, दो अलग, स्वतंत्र reports हैं, जो अलग-अलग models पर आधारित हैं और उसी interface के अलग-अलग tabs पर दिखाई जाती हैं। TextPulse ने यह कि similarity score और AI score वास्तव में कैसे भिन्न हैं पर अन्यत्र अधिक विस्तार से चर्चा की है। एक विश्वविद्यालय पहले को छुए बिना दूसरे को बंद कर सकता है, और नीचे दिए गए हर मामले में ठीक यही किया गया।

Vanderbilt University: सबसे विस्तृत सार्वजनिक व्याख्या

Vanderbilt ने 16 August, 2023 को Turnitin के AI detector को निष्क्रिय कर दिया, और उसी दिन अपना तर्क प्रकाशित किया, बजाय इसके कि पत्रकारों को उसे जोड़कर समझना पड़े। विश्वविद्यालय की अपनी गणना उस तर्क का सबसे स्पष्ट रूप है जिसे किसी भी संस्था ने सार्वजनिक किया है: Turnitin ने 1 percent false positive rate का दावा किया था, और 2022 में Vanderbilt द्वारा Turnitin को प्रस्तुत लगभग 75,000 papers के विरुद्ध, विश्वविद्यालय ने गणना की कि इस दर का अर्थ था "around 750 student papers could have been incorrectly labeled as having some of it written by AI."

Vanderbilt ने उस गणना के साथ दो और कारण भी दिए: non-native English writers के विरुद्ध प्रलेखित bias, और इस बारे में अपर्याप्त पारदर्शिता कि अंतर्निहित model वास्तव में अपना score कैसे प्राप्त करता है। ये तीन सूत्र, एक false positive count जो अनदेखा करने के लिए बहुत बड़ा है, एक bias problem, और एक opaque model, किसी न किसी रूप में लगभग हर उस institution में फिर से दिखाई देते हैं जिसने तब से सार्वजनिक रूप से opt-out की व्याख्या की है।

InstitutionActionDateStated reason, in the institution's own words
Vanderbilt UniversityDisabled the AI writing indicator account-wideAugust 16, 2023A claimed 1% false positive rate applied to its own submission volume; bias against non-native English writers; lack of model transparency
Michigan State UniversityAI writing detection not made available to instructorsGuidance dated August 2023AI detection tools should not be used as the sole basis for adverse action against a student
University of Texas at AustinBans use of AI detection software on student workNo date stated on UT Austin's own page; listed among opted-out institutions by February 2024Classifies AI detection software as High Risk; cites copyright, intellectual property and FERPA concerns

अपने पेपर को मानवीय बनाइए

अपने AI-सहायता प्राप्त पाठ को रूपांतरित करें और उसे मानवीय ध्वनि दें, महत्वपूर्ण शब्दों या उद्धरणों को छेड़े बिना।

मुफ़्त में शुरू करें

Michigan State और UT Austin: दो और पुष्ट opt-outs

Michigan State की अपनी सहायता दस्तावेज़ीकरण स्पष्ट रूप से कहती है: "Turnitin AI Detection is not currently available at MSU." इसकी मार्गदर्शिका एक सावधानी भी जोड़ती है, जो इस बात से स्वतंत्र रूप से लागू होती है कि कोई पाठ्यक्रम कौन-सा detector उपयोग करता है: AI detection tools "should not be used as the sole basis for adverse actions against a student." यह पृष्ठ MSU की व्यापक generative-AI मार्गदर्शिका के भीतर स्थित है, जिसकी तिथि August 2023 है, वही महीना जब Vanderbilt ने अपना निर्णय सार्वजनिक किया था।

UT Austin ने तीनों में अधिक व्यापक रुख अपनाया। विश्वविद्यालय का Office of the Provost स्पष्ट रूप से कहता है कि वह "does not endorse the use of AI Detection Software and does not have any central contracts or purchase orders with active AI Detection Software features." यह पृष्ठ केवल opt-out से आगे जाता है: यह AI detection software को "High Risk" के रूप में वर्गीकृत करता है, जिसका अर्थ है कि कोई विभाग procurement card से भी इसे नहीं खरीद सकता, और यह चेतावनी देता है कि किसी छात्र के कार्य को ऐसे software से चलाना "may be a violation of that student's copyright and intellectual property rights," साथ ही अलग FERPA चिंताओं के साथ। UT Austin के अपने पृष्ठ पर कोई विशिष्ट निर्णय तिथि नहीं दी गई है, education-press coverage में February 2024 तक विश्वविद्यालय पहले से ही opted-out संस्थानों की सूची में शामिल था।

प्रेस के अनुसार, Turnitin का उपयोग बंद करने वाले अन्य विश्वविद्यालय

इस कहानी की coverage को संकलित करते समय दो अन्य नाम अक्सर सामने आते हैं: Northwestern University और Montclair State University। दोनों मौजूद हैं, लेकिन दोनों का उल्लेख अन्य तीन की तुलना में समान स्तर के विश्वसनीय स्रोतों द्वारा नहीं किया गया है। February 2024 में, Inside Higher Ed ने रिपोर्ट किया कि Montclair ने "announced in November [2023]... that academics should not use the AI-detector feature in a tool from Turnitin," "similar moves from institutions including Vanderbilt University, the University of Texas at Austin and Northwestern University" के बाद।

यह ठोस ट्रेड-प्रेस स्रोत है, लेकिन यह किसी संस्थान के अपने पृष्ठ से अलग मानक है, जहाँ निर्णय को उसके अपने शब्दों में बताया गया हो, और इस लेख के लिए शोध करते समय दोनों विश्वविद्यालयों के लिए ऐसा कोई पृष्ठ नहीं मिला। इस अंतर को स्पष्ट रूप से कहना चाहिए, उसे समतल नहीं करना चाहिए। हर प्रेस उल्लेख से बनी सूची तीन नामों से लंबी होगी, जबकि किसी संस्थान द्वारा अपने लिए वास्तव में प्रकाशित सामग्री से बनी सूची अभी तीन पर ही रुकती है, और यही अधिक कठोर मानक है जिसका यह लेख पूरे समय पालन करता है।

विश्वविद्यालय AI Detector को क्यों बंद कर रहे हैं?

ऊपर दिए गए हर सार्वजनिक कथन में वही कुछ कारण बार-बार आते हैं, एक false positive दर जो तब छोटी नहीं लगती जब उसे वास्तविक छात्र-जनसंख्या से गुणा किया जाता है, गैर-देशी अंग्रेज़ी लेखकों के विरुद्ध दर्ज bias, और ऐसा classifier जिसके आंतरिक कार्य-विधान को vendor ने पूरी तरह प्रकट नहीं किया है। यह तर्क क्या AI detectors वास्तव में सटीक हैं पर उपलब्ध व्यापक साक्ष्य से मेल खाता है, केवल Turnitin तक सीमित नहीं। ऊपर दिए गए तीनों संस्थानों में से कोई भी यह विवाद नहीं करता कि Turnitin का similarity checker अपना मूल कार्य अभी भी करता है, आपत्ति केवल एक अतिरिक्त feature पर है।

इसका यह अर्थ नहीं है कि जो विश्वविद्यालय इस feature को चालू रखता है, वह लापरवाही से काम कर रहा है, और इसका यह भी अर्थ नहीं है कि जिसने इसे बंद किया है, उसने मूल समस्या हल कर ली है। इसका अर्थ यह है कि प्रशासकों के दो समूहों ने वही प्रकाशित आँकड़े देखे और अलग judgment calls पर पहुँचे, और अब इस technology के साथ छात्र का अनुभव आंशिक रूप से इस बात पर निर्भर करता है कि वह किस विश्वविद्यालय में पढ़ता है, न कि उस paper पर, जिसे उसने जमा किया है।

जो writer यह जानना चाहता है कि क्या उसके अपने draft में Vanderbilt की bias आपत्ति में वर्णित statistical profile है, वह किसी free perplexity checker से सीधे जाँच कर सकता है, बजाय इसके कि वह यह जानने की प्रतीक्षा करे कि उसके अपने विश्वविद्यालय ने कौन-सी policy चुनी है।

उन निर्णयों के पीछे का evidence अलग से दिया गया है: false positive वास्तव में क्या होता है, और वह false positive rate जिसे Turnitin स्वयं प्रकाशित करता है

TextPulse के निःशुल्क उपकरण किसी भी सामग्री के किसी डिटेक्टर तक पहुँचने से पहले ही उसी क्षेत्र को कवर करते हैं। Turnitin अपने मॉडल को पुनः प्रशिक्षित करते समय अपनी सीमाओं को समायोजित करता रहेगा, किसी दिए गए विश्वविद्यालय में वर्तमान में यह सुविधा चालू है या नहीं, यह एक सेटिंग है, न कि स्वयं पेपर के बारे में कोई तथ्य, और यह उचित है कि ड्राफ्ट की उसके अपने आधार पर जाँच की जाए, चाहे इस सेमेस्टर में वह सेटिंग किसी भी दिशा में बदली हुई हो।

XLinkedInFacebook

अक्सर पूछे जाने वाले प्रश्न

नहीं। दर्ज प्रत्येक मामला एक विश्वविद्यालय द्वारा एक सुविधा, Turnitin का AI लेखन संकेतक, निष्क्रिय करने का है, जबकि वह अभी भी Turnitin के similarity checker का उपयोग प्रस्तुतियों की plagiarism के लिए तुलना करने हेतु करता है। Turnitin की अपनी admin settings किसी संस्था को उत्पाद के बाकी हिस्से को छुए बिना AI सुविधा बंद करने देती हैं, और Vanderbilt, Michigan State तथा UT Austin ने ठीक यही setting उपयोग की थी।

Moe

PhD in natural language processing, with years spent building NLP applications end to end. Moe works on text analysis: lexical and syntactic structure, and what separates machine-generated prose from human prose statistically. He has been experimenting with computational linguistics since the early days of NLTK, spaCy and WordNet, and still writes most of his tooling in Python.

AI मानवीकरण पर अपडेट रहें

शैक्षणिक लेखन, AI पहचान, और मानवीकरण के सुझाव सीधे अपने इनबॉक्स में प्राप्त करें।

कोई स्पैम नहीं। कभी भी सदस्यता समाप्त करें।