Ποιες πανεπιστημιακές ιδρύσεις σταμάτησαν να χρησιμοποιούν το Turnitin's AI Detector
Το Vanderbilt, το Michigan State και το UT Austin έχουν δημοσιεύσει το καθένα τη δική του αιτιολόγηση για την απενεργοποίηση του δείκτη AI writing του Turnitin. Κανένα από αυτά δεν εγκατέλειψε το Turnitin ως σύνολο. Ακολουθεί η διάκριση, η αριθμητική που τη στηρίζει, και ποια άλλα ονόματα επαναλαμβάνονται χωρίς να υπάρχει δική τους σελίδα ιδρύματος που να τα επιβεβαιώνει.
Ο κατάλογος των πανεπιστημίων που σταμάτησαν να χρησιμοποιούν τη λειτουργία ανίχνευσης AI του Turnitin είναι μικρότερος, και καλύτερα τεκμηριωμένος, από όσο φαίνεται στα αποτελέσματα αναζήτησης. Τρία ιδρύματα των ΗΠΑ, το Vanderbilt University, το Michigan State University και το University of Texas at Austin, έχουν δημοσιεύσει το καθένα τη δική του σελίδα που επιβεβαιώνει ότι απενεργοποίησαν τη λειτουργία, δηλώνοντας τους λόγους τους με δικά τους λόγια. Κανένα από τα τρία δεν εγκατέλειψε το Turnitin ως σύνολο.
Η τελευταία αυτή πρόταση είναι το σημείο που παραλείπουν οι περισσότερες συνοπτικές παρουσιάσεις. Το Turnitin προσφέρει δύο προϊόντα σε ένα περιβάλλον εργασίας, έναν ελεγκτή ομοιότητας που συγκρίνει τις φοιτητικές εργασίες με μια βάση κειμένων, μια υπηρεσία που είναι διαθέσιμη από πολύ πριν εφευρεθεί η γενετική AI, και έναν δείκτη γραφής AI, έναν ταξινομητή που βαθμολογεί την πρόζα μιας εργασίας ως προς το πόσο μοιάζει με έξοδο μηχανής. Αυτή η νέα λειτουργία τέθηκε σε λειτουργία τον April 2023. Μόνο το δεύτερο προϊόν απενεργοποιήθηκε από κάθε ίδρυμα παρακάτω.
Ακολουθεί η αιτιολόγηση που έδωσαν τρία πανεπιστήμια με δικά τους λόγια, δύο ακόμη ονόματα που η δημοσιογραφική κάλυψη επαναλαμβάνει χωρίς σελίδα ιδιοκτησίας του ιδρύματος για να τα επιβεβαιώσει, και τι αλλάζει στην πράξη ένας διαχειριστής όταν λαμβάνει αυτή την απόφαση.
Σταμάτησε κάποιο πανεπιστήμιο να χρησιμοποιεί το Turnitin εντελώς;
Δεν υπάρχει επιβεβαιωμένη περίπτωση κάτι τέτοιου. Κάθε τεκμηριωμένο παράδειγμα είναι ένα πανεπιστήμιο που απενεργοποιεί μία συγκεκριμένη ρύθμιση μέσα σε ένα προϊόν το οποίο κατά τα άλλα συνεχίζει να χρησιμοποιεί. Η ίδια η καθοδήγηση του Turnitin εξηγεί γιατί αυτή η διάκριση είναι καν δυνατή: οι διαχειριστές "have the option to enable/disable the AI writing feature from their admin settings page," και αυτό "will remove the AI writing indicator and report from the Similarity report," αφήνοντας το ίδιο το Similarity report να συνεχίζει να λειτουργεί.
Το Similarity Score και το AI Score είναι δύο ξεχωριστές, ανεξάρτητες αναφορές, με τα δικά του λόγια το Turnitin, βασισμένες σε διαφορετικά μοντέλα και εμφανιζόμενες σε διαφορετικές καρτέλες του ίδιου περιβάλλοντος εργασίας. Το TextPulse έχει καλύψει πώς ακριβώς διαφέρουν το similarity score και το AI score με περισσότερες λεπτομέρειες αλλού. Ένα πανεπιστήμιο μπορεί να απενεργοποιήσει το δεύτερο χωρίς να αγγίξει το πρώτο, και κάθε περίπτωση παρακάτω έκανε ακριβώς αυτό.
Vanderbilt University: Η πιο λεπτομερής δημόσια εξήγηση
Το Vanderbilt απενεργοποίησε τον ανιχνευτή AI του Turnitin στις 16 Αυγούστου 2023 και δημοσίευσε την αιτιολόγησή του την ίδια ημέρα, αντί να αφήσει τους δημοσιογράφους να τη συνθέσουν. Η ίδια η αριθμητική του πανεπιστημίου είναι η σαφέστερη εκδοχή του επιχειρήματος που έχει δημοσιοποιήσει οποιοδήποτε ίδρυμα: το Turnitin είχε ισχυριστεί ποσοστό ψευδώς θετικών 1%, και, σε σχέση με τις περίπου 75,000 εργασίες που το Vanderbilt υπέβαλε στο Turnitin το 2022, το πανεπιστήμιο υπολόγισε ότι αυτό το ποσοστό σήμαινε ότι "around 750 student papers could have been incorrectly labeled as having some of it written by AI."
Το Vanderbilt έδωσε δύο ακόμη λόγους μαζί με αυτή την αριθμητική: τεκμηριωμένη μεροληψία εις βάρος μη φυσικών ομιλητών της αγγλικής, και ανεπαρκή διαφάνεια ως προς το πώς το υποκείμενο μοντέλο καταλήγει πράγματι στη βαθμολογία του. Αυτά τα τρία νήματα, ένας αριθμός ψευδώς θετικών υπερβολικά μεγάλος για να παραμεριστεί, ένα πρόβλημα μεροληψίας και ένα αδιαφανές μοντέλο, επανεμφανίζονται με κάποια μορφή σχεδόν σε κάθε ίδρυμα που έχει εξηγήσει δημόσια μια εξαίρεση από τη χρήση του από τότε.
| Ίδρυμα | Ενέργεια | Ημερομηνία | Δηλωμένος λόγος, με τα ίδια τα λόγια του ιδρύματος |
|---|---|---|---|
| Vanderbilt University | Απενεργοποίησε τον δείκτη γραφής AI σε επίπεδο λογαριασμού | 16 Αυγούστου 2023 | Ένα υποτιθέμενο ποσοστό ψευδώς θετικών 1% εφαρμοζόταν στον δικό του όγκο υποβολών, μεροληψία εις βάρος μη φυσικών ομιλητών της αγγλικής, έλλειψη διαφάνειας του μοντέλου |
| Michigan State University | Η ανίχνευση γραφής AI δεν τέθηκε στη διάθεση των διδασκόντων | Καθοδήγηση με ημερομηνία August 2023 | Τα εργαλεία ανίχνευσης AI δεν πρέπει να χρησιμοποιούνται ως η μοναδική βάση για δυσμενή ενέργεια κατά φοιτητή |
| University of Texas at Austin | Απαγορεύει τη χρήση λογισμικού ανίχνευσης AI σε φοιτητικό έργο | Δεν αναφέρεται ημερομηνία στη δική του σελίδα του UT Austin, καταγράφεται μεταξύ των ιδρυμάτων που είχαν εξαιρεθεί έως τον February 2024 | Κατατάσσει το λογισμικό ανίχνευσης AI ως Υψηλού Κινδύνου, επικαλείται ανησυχίες για copyright, intellectual property και FERPA |
Ανθρωποποιήστε τη δική σας εργασία
Μετασχηματίστε το κείμενό σας με τη βοήθεια AI και κάντε το να ακούγεται ανθρώπινο, χωρίς να αγγίξετε σημαντικές λέξεις ή παραπομπές.
Michigan State και UT Austin, δύο ακόμη επιβεβαιωμένες εξαιρέσεις από τη χρήση
Η δική του τεκμηρίωση βοήθειας του Michigan State αναφέρει ρητά: "Turnitin AI Detection is not currently available at MSU." Η καθοδήγησή του προσθέτει μια προειδοποίηση που ισχύει ανεξάρτητα από το ποιος ανιχνευτής χρησιμοποιεί ένα μάθημα: τα εργαλεία ανίχνευσης AI "should not be used as the sole basis for adverse actions against a student." Η σελίδα εντάσσεται στη ευρύτερη καθοδήγηση του MSU για τη γενετική AI, με ημερομηνία τον Αύγουστο του 2023, τον ίδιο μήνα που το Vanderbilt δημοσιοποίησε τη δική του απόφαση.
Το UT Austin υιοθέτησε την πιο εκτεταμένη θέση από τα τρία. Το Office of the Provost του πανεπιστημίου δηλώνει κατηγορηματικά ότι "does not endorse the use of AI Detection Software and does not have any central contracts or purchase orders with active AI Detection Software features." Η σελίδα προχωρά πέρα από μια απλή μη χρήση, καθώς κατατάσσει το λογισμικό ανίχνευσης AI ως "High Risk", πράγμα που σημαίνει ότι ένα τμήμα δεν μπορεί να αγοράσει ένα τέτοιο εργαλείο ακόμη και με κάρτα προμηθειών, και προειδοποιεί ότι η υποβολή της εργασίας ενός φοιτητή σε τέτοιο λογισμικό "may be a violation of that student's copyright and intellectual property rights," μαζί με ξεχωριστές ανησυχίες FERPA. Η ίδια σελίδα του UT Austin δεν αναφέρει συγκεκριμένη ημερομηνία απόφασης, η κάλυψη στον εκπαιδευτικό Τύπο είχε ήδη συμπεριλάβει το πανεπιστήμιο στον κατάλογο των ιδρυμάτων που είχαν επιλέξει να μην το χρησιμοποιούν έως τον Φεβρουάριο του 2024.
Άλλα Πανεπιστήμια που Σταμάτησαν να Χρησιμοποιούν το Turnitin, Σύμφωνα με τον Τύπο
Υπάρχουν άλλα δύο που εμφανίζονται συχνά όταν συγκεντρώνεται η κάλυψη αυτής της ιστορίας: το Northwestern University και το Montclair State University. Και τα δύο υπάρχουν, αλλά κανένα από τα δύο δεν τεκμηριώνεται από το ίδιο επίπεδο αξιόπιστων πηγών όπως τα άλλα τρία. Τον Φεβρουάριο του 2024, το Inside Higher Ed ανέφερε ότι το Montclair "announced in November [2023]... that academics should not use the AI-detector feature in a tool from Turnitin," μετά από "similar moves from institutions including Vanderbilt University, the University of Texas at Austin and Northwestern University.".
Αυτό αποτελεί ισχυρή τεκμηρίωση από τον ειδικό Τύπο, αλλά είναι διαφορετικό πρότυπο από μια σελίδα του ίδιου του ιδρύματος που δηλώνει μια απόφαση με δικά του λόγια, και τέτοια σελίδα δεν εντοπίστηκε για κανένα από τα δύο πανεπιστήμια κατά την έρευνα για αυτό το κείμενο. Το κενό αξίζει να ονομαστεί αντί να εξομαλυνθεί. Ένας κατάλογος που θα βασιζόταν σε κάθε αναφορά στον Τύπο θα ήταν μακρύτερος από τρία ονόματα, ένας κατάλογος που θα βασιζόταν σε ό,τι έχει πράγματι δημοσιεύσει ένα ίδρυμα για τον εαυτό του σταματά προς το παρόν στα τρία, και αυτό είναι το αυστηρότερο πρότυπο στο οποίο παραμένει το παρόν κείμενο σε όλη του την έκταση.
Γιατί τα πανεπιστήμια απενεργοποιούν τον ανιχνευτή AI;
Οι ίδιες λίγες αιτίες επανέρχονται σε κάθε δημόσια δήλωση παραπάνω, ένα ποσοστό ψευδώς θετικών που παύει να φαίνεται μικρό όταν πολλαπλασιαστεί με έναν πραγματικό φοιτητικό πληθυσμό, τεκμηριωμένη μεροληψία εις βάρος συγγραφέων που δεν έχουν τα αγγλικά ως μητρική γλώσσα, και ένας ταξινομητής του οποίου η εσωτερική λειτουργία δεν έχει αποκαλυφθεί πλήρως από τον προμηθευτή. Η συλλογιστική ευθυγραμμίζεται με τα ευρύτερα στοιχεία σχετικά με το αν οι ανιχνευτές AI είναι καθόλου ακριβείς, όχι μόνο στο Turnitin. Κανένα από τα τρία ιδρύματα παραπάνω δεν αμφισβητεί ότι ο έλεγχος ομοιότητας του Turnitin εξακολουθεί να επιτελεί την αρχική του λειτουργία, η ένσταση αφορά συγκεκριμένα μία πρόσθετη δυνατότητα.
Τίποτε από αυτά δεν σημαίνει ότι ένα πανεπιστήμιο που διατηρεί τη δυνατότητα ενεργοποιημένη ενεργεί αμελώς, και τίποτε από αυτά δεν σημαίνει ότι ένα πανεπιστήμιο που την απενεργοποίησε έχει λύσει το υποκείμενο πρόβλημα. Σημαίνει ότι δύο ομάδες διοικητικών στελεχών εξέτασαν τα ίδια δημοσιευμένα στοιχεία και κατέληξαν σε διαφορετικές κρίσεις, και η εμπειρία ενός φοιτητή με αυτή την τεχνολογία εξαρτάται πλέον εν μέρει από το ποιο πανεπιστήμιο φοιτά, και όχι από οτιδήποτε αφορά την εργασία που υπέβαλε.
Ένας συγγραφέας που αναρωτιέται αν το δικό του προσχέδιο φέρει το στατιστικό προφίλ που περιγράφει η ένσταση της Vanderbilt για τη μεροληψία μπορεί να το ελέγξει απευθείας με έναν free perplexity checker αντί να περιμένει για να μάθει ποια πολιτική έχει επιλέξει το δικό του πανεπιστήμιο.
Τα στοιχεία πίσω από αυτές τις αποφάσεις παρουσιάζονται ξεχωριστά: τι είναι στην πραγματικότητα ένα ψευδώς θετικό, και το ποσοστό ψευδώς θετικών που δημοσιεύει το ίδιο το Turnitin.
Τα δωρεάν εργαλεία του TextPulse καλύπτουν το ίδιο πεδίο πριν οτιδήποτε από αυτά φτάσει καν σε έναν ανιχνευτή. Το Turnitin θα συνεχίσει να προσαρμόζει τα δικά του κατώφλια καθώς επανεκπαιδεύει το μοντέλο, το αν ένα δεδομένο πανεπιστήμιο χρησιμοποιεί αυτή τη στιγμή τη λειτουργία είναι μια ρύθμιση, όχι ένα γεγονός για το ίδιο το κείμενο, και αξίζει να ελέγχετε ένα προσχέδιο με βάση τα δικά του χαρακτηριστικά, ανεξάρτητα από το προς ποια κατεύθυνση τυχαίνει να είναι γυρισμένη αυτή η ρύθμιση αυτό το εξάμηνο.
Συχνές ερωτήσεις
Όχι. Κάθε τεκμηριωμένη περίπτωση αφορά ένα πανεπιστήμιο που απενεργοποιεί μία λειτουργία, τον δείκτη AI writing του Turnitin, ενώ συνεχίζει να χρησιμοποιεί τον ελεγκτή ομοιότητας του Turnitin για τη σύγκριση υποβολών ως προς τη λογοκλοπή. Οι ίδιες οι ρυθμίσεις διαχειριστή του Turnitin επιτρέπουν σε ένα ίδρυμα να απενεργοποιήσει τη λειτουργία AI χωρίς να αγγίξει το υπόλοιπο προϊόν, και αυτή είναι ακριβώς η ρύθμιση που χρησιμοποίησαν το Vanderbilt, το Michigan State και το UT Austin.
PhD in natural language processing, with years spent building NLP applications end to end. Moe works on text analysis: lexical and syntactic structure, and what separates machine-generated prose from human prose statistically. He has been experimenting with computational linguistics since the early days of NLTK, spaCy and WordNet, and still writes most of his tooling in Python.