Μπορεί το Turnitin να ανιχνεύσει εξανθρωπισμένο κείμενο AI;
Το Turnitin λέει ότι ο δείκτης γραφής AI ήδη καλύπτει κείμενο που έχει περάσει από humanizer. Τι σημαίνει και τι δεν σημαίνει αυτός ο ισχυρισμός, γιατί ένα εξανθρωπισμένο έγγραφο μερικές φορές εξακολουθεί να λαμβάνει υψηλή βαθμολογία και μερικές φορές όχι, και τι αξίζει ο αριθμός για έναν φοιτητή σε κάθε περίπτωση.
Το Turnitin απαντά σε αυτό το ερώτημα στον δικό του ιστότοπο υποστήριξης, και η απάντηση είναι πιο συγκεκριμένη από ό,τι υποστηρίζει καθεμία πλευρά του συνήθους επιχειρήματος. Ο δείκτης γραφής AI του, λέει το Turnitin, περιλαμβάνει ήδη ανίχνευση περιεχομένου που έχει παραχθεί από AI και μπορεί να έχει εξανθρωπιστεί ή να έχει περάσει από bypasser για να αποφύγει την ανίχνευση. Αυτό είναι ένας προμηθευτής που περιγράφει το δικό του προϊόν. Είναι επίσης το σωστό σημείο εκκίνησης, επειδή σας λέει τι ισχυρίζεται ότι καλύπτει το μοντέλο.
Λοιπόν, μπορεί το Turnitin να ανιχνεύσει εξανθρωπισμένο κείμενο; Το ερώτημα έχει μια στενότερη και πιο χρήσιμη μορφή. Το μοντέλο του Turnitin δεν αναζητά το αποτύπωμα ενός humanizer και δεν διατηρεί κατάλογο εργαλείων. Βαθμολογεί την πρόζα πρόταση προς πρόταση ως προς το πόσο στενά η γραφή αντιστοιχεί στα στατιστικά πρότυπα κειμένου που παράγεται από μηχανή, και στη συνέχεια υπολογίζει τον μέσο όρο αυτών των βαθμολογιών σε όλο το έγγραφο. Το αν ένα εξανθρωπισμένο απόσπασμα εξακολουθεί να βαθμολογείται υψηλά εξαρτάται από το πόσο από αυτό το πρότυπο άλλαξε η αναδιατύπωση, και από το πόσο μεγάλο μέρος του εγγράφου αναδιατυπώθηκε καθόλου.
Μπορεί το Turnitin να ανιχνεύσει εξανθρωπισμένο κείμενο; Τι ισχυρίζεται το Turnitin
Η δημοσιευμένη θέση τους είναι ένα απλό ναι. Απαντώντας στο αν μπορεί να ανιχνεύσει περιεχόμενο που έχει περάσει από humanizer, η καθοδήγησή τους αναφέρει: "Yes, Turnitin's AI indicator includes detection of AI-generated content that may have been humanized or passed through a bypasser to avoid detection." Η ίδια σελίδα δίνει την ίδια απάντηση για εργαλεία AI paraphrasing.
Αυτός ο ισχυρισμός δεν εμφανίζεται ως δεύτερος αριθμός κάπου στην αναφορά. Το Turnitin τον ενσωματώνει στο ενιαίο ποσοστό γραφής AI, και ο δημοσιευμένος ορισμός αυτού του ποσοστού το λέει άμεσα: καλύπτει κείμενο που το μοντέλο κρίνει ότι πιθανότατα δημιουργήθηκε από AI, ή πιθανότατα δημιουργήθηκε και στη συνέχεια τροποποιήθηκε από έναν AI paraphraser ή bypasser. Υπάρχει μία βαθμολογία, και ήδη λαμβάνει υπόψη την αναδιατύπωση, στο μέτρο που το μοντέλο είναι σε θέση να το κάνει.
Διαβάστε προσεκτικά, αυτό είναι μια δήλωση σχετικά με την κάλυψη και όχι μια δήλωση σχετικά με την ακρίβεια. Το Turnitin λέει ότι το ανθρωποποιημένο κείμενο ήταν εντός του πεδίου όταν κατασκευάστηκε το μοντέλο. Απέχει πολύ από το να λέει ότι κάθε ανθρωποποιημένο έγγραφο βαθμολογείται υψηλά, και τα δικά του δημοσιευμένα στοιχεία, πιο κάτω, περιγράφουν ένα μοντέλο που αντιμετωπίζει τις μεμονωμένες προτάσεις ως αβέβαιες.
Τι Αξιολογεί Πραγματικά ο Δείκτης AI Writing Indicator
Δεν είναι ποσοστό. Είναι κλάσμα κειμένου, άρα δεν είναι επίπεδο εμπιστοσύνης. Είναι μέτρο του πόσο κείμενο μέσα στο έγγραφό σας το μοντέλο μας θεωρεί πιθανό να έχει παραχθεί από AI. Το ονομάζουμε εξειδικευμένο κείμενο, που σημαίνει προτασιακό πεζό λόγο σε μορφή εκτενούς γραφής. Δεν περιλαμβάνει λίστες με κουκκίδες, κώδικα, πίνακες ή σύντομα αποσπάσματα. Και γι' αυτό μπορεί να δείτε διαφορετικούς αριθμούς για την ίδια εργασία ανάλογα με το πόσο από αυτήν είναι συνεχές πεζό κείμενο.
Ο μηχανισμός από κάτω είναι αρκετά απλός ώστε να τον φανταστεί κανείς. Το Turnitin χωρίζει ένα έγγραφο σε αλληλοεπικαλυπτόμενα τμήματα περίπου μερικών εκατοντάδων λέξεων, περίπου πέντε έως δέκα προτάσεις το καθένα, με επικάλυψη ώστε κάθε πρόταση να βαθμολογείται στο συμφραζόμενο της. Κάθε πρόταση λαμβάνει μια τιμή μεταξύ 0 και 1. Οι βαθμολογίες των τμημάτων στη συνέχεια υπολογίζονται ως μέσος όρος σε όλο το έγγραφο, ώστε να παραχθεί ο ένας αριθμός που βλέπει ο διδάσκων. Μια βήμα προς βήμα περιγραφή του πώς το Turnitin ανιχνεύει AI εξετάζει κάθε στάδιο με περισσότερη λεπτομέρεια.
Αυτό το βήμα της μέσης τιμής έχει μεγαλύτερη σημασία για το ανθρωποποιημένο κείμενο από οτιδήποτε άλλο στη ροή επεξεργασίας, και είναι το μέρος που σχεδόν κανείς δεν λαμβάνει υπόψη. Το μέγεθος που διαβάζει ο διδάσκων είναι αριθμητικός μέσος όρος των κρίσεων σε επίπεδο τμήματος. Ένα έγγραφο μπορεί να έχει ξαναγραφεί κατά το ήμισυ και να καταλήξει κάπου στη μέση για λόγους που έχουν ελάχιστη σχέση με το πόσο καλή ήταν η αναδιατύπωση.
Γιατί το Ανθρωποποιημένο Αποτέλεσμα Μερικές Φορές Παρ' Όλα Αυτά Βαθμολογείται Υψηλά
Ο πιο συνηθισμένος λόγος είναι η κάλυψη. Ένας humanizer που εφαρμόζεται σε μια εισαγωγή και ένα συμπέρασμα αφήνει την ανασκόπηση της βιβλιογραφίας και τη συζήτηση ανέπαφες, και αυτά τα τμήματα μεταφέρουν τις αρχικές τους βαθμολογίες απευθείας στον μέσο όρο. Σε ένα μακρύ κεφάλαιο, η αναδιατύπωση των πρώτων σελίδων αλλάζει μερικά τμήματα και αφήνει τα υπόλοιπα ακριβώς όπως ήταν, κάτι που παράγει μικρότερη μεταβολή από όση αναμένει ο συγγραφέας από μια εργασία που φάνηκε ουσιαστική.
Ο δεύτερος λόγος είναι το βάθος της αναδιατύπωσης. Μια διέλευση που αντικαθιστά το λεξιλόγιο, ενώ διατηρεί τα μήκη των προτάσεων, τη σειρά των προτάσεων και τις επιλογές των μεταβάσεων στη θέση τους, αφήνει σε μεγάλο βαθμό άθικτο το μοτίβο πάνω στο οποίο εκπαιδεύτηκε ο ταξινομητής. Το μοντέλο βαθμολογεί τη μορφή του πεζού λόγου, επομένως η αλλαγή των λέξεων που γεμίζουν αυτή τη μορφή κάνει λιγότερα από όσα υποθέτουν οι περισσότεροι άνθρωποι. Ένας free perplexity checker θα δείξει πόσο προβλέψιμο εξακολουθεί να διαβάζεται ένα απόσπασμα μετά από μια αναδιατύπωση, κάτι που αποτελεί πιο ενημερωτικό σήμα από μια σύγκριση σε επίπεδο λέξης πριν και μετά.
Ο τρίτος λόγος είναι ότι μια αναδιατύπωση μπορεί να εγκαθιδρύσει τη δική της κανονικότητα. Ένα λογισμικό που εφαρμόζει την ίδια μετατροπή σε κάθε παράγραφο θα παράγει ένα νέο μοτίβο που είναι εξίσου κανονικό με το παλιό. Αν κάθε πρόταση έχει τον ίδιο τύπο αρμού που κόβεται μέσα της, ή αν σε κάθε πρόταση προστίθεται στο ίδιο σημείο το ίδιο είδος επιφυλακτικής πρότασης, αυτές οι προτάσεις θα γίνουν αντιληπτές ως εξίσου ομοιόμορφες από έναν ταξινομητή, όπως θα είχαν γίνει αν όλες είχαν εξαρχής το ίδιο μήκος.
| Κατάσταση | Τι κάνει η βαθμολογία AI | Γιατί |
|---|---|---|
| Μόνο μέρος του εγγράφου ξαναγράφτηκε | Πέφτει λιγότερο από το αναμενόμενο | Τα αμετάβλητα τμήματα μεταφέρουν τις αρχικές τους βαθμολογίες στον μέσο όρο |
| Το λεξιλόγιο άλλαξε, η δομή των προτάσεων διατηρήθηκε | Μεταβάλλεται πολύ λίγο | Ο ταξινομητής βαθμολογεί μοτίβα σε επίπεδο πρότασης που η αντικατάσταση άφησε στη θέση τους |
| Οι προτάσεις αναδιαρθρώθηκαν ουσιαστικά σε όλο το κείμενο | Μεταβάλλεται περισσότερο | Ο ομοιόμορφος ρυθμός που το μοντέλο εκπαιδεύτηκε να αναγνωρίζει διακόπτεται |
| Υποβλήθηκαν λιγότερες από 300 λέξεις πεζού λόγου | Δεν παράγεται καθόλου βαθμολογία | Το Turnitin απαιτεί 300 λέξεις επιλέξιμου πεζού λόγου πριν αναφέρει ποσοστό |
| Το αποτέλεσμα πέφτει κάτω από 20 percent | Αντί για αριθμό, εμφανίζεται αστερίσκος | Το Turnitin επισημαίνει τα αποτελέσματα σε αυτό το εύρος ως λιγότερο αξιόπιστα |
Γιατί η ίδια αναδιατύπωση παράγει μερικές φορές χαμηλή βαθμολογία
Ένα εξανθρωπισμένο έγγραφο μπορεί να επιστρέψει με χαμηλή βαθμολογία για λόγους που δεν έχουν καμία σχέση με την αναδιατύπωση. Το Turnitin χρειάζεται τουλάχιστον 300 λέξεις επιλέξιμου πεζού λόγου πριν παράγει καθόλου ποσοστό AI, ένα κατώφλι που αύξησε από τις αρχικές 150 λέξεις με τη δηλωμένη αιτιολογία ότι η ακρίβεια βελτιώνεται με λίγο περισσότερο κείμενο. Ένα σύντομο στοχαστικό κείμενο δεν παράγει αριθμό, και η απουσία βαθμολογίας δεν είναι το ίδιο με μια καθαρή βαθμολογία.
Το Turnitin επισημαίνει ένα εύρος κάτω από 20 percent με αστερίσκο αντί να δίνει ακριβές ποσοστό, επειδή υπάρχει μεγαλύτερη συχνότητα ψευδώς θετικών αποτελεσμάτων μέσα σε αυτό το εύρος. Την περίοδο της κυκλοφορίας, η εκπαιδευτική ενημέρωση αναφερόταν επίσης σε αυτή τη συμπεριφορά, λέγοντας ότι τα αποτελέσματα που αναφέρονταν ως λιγότερο από 20 percent AI-written είχαν υψηλότερη συχνότητα ψευδώς θετικών αποτελεσμάτων και επομένως το Turnitin πρόσθεσε αποποιήσεις ευθύνης. Ένα έγγραφο που βρίσκεται σε αυτή τη ζώνη έχει επισημανθεί ως εύρος το οποίο το Turnitin αρνείται να αναφέρει με ακρίβεια, κάτι που είναι διαφορετικό από το να έχει εγκριθεί.
Υπάρχει επίσης ένα θεσμικό φίλτρο πάνω από όλα αυτά. Το Turnitin επεξεργάζεται μια υποβολή για ανίχνευση γραφής από AI μόνο αν το ίδρυμα έχει ενεργοποιήσει τη λειτουργία, και οι διαχειριστές μπορούν να την απενεργοποιήσουν σε επίπεδο λογαριασμού. Το Vanderbilt University έκανε ακριβώς αυτό τον Αύγουστο του 2023, επικαλούμενο το τότε δημοσιευμένο ποσοστό ψευδώς θετικών 1 percent του Turnitin έναντι περίπου 75,000 ετήσιων υποβολών, προκατάληψη εις βάρος συγγραφέων που δεν έχουν τα αγγλικά ως μητρική γλώσσα, και έλλειψη διαφάνειας ως προς τον τρόπο λειτουργίας του μοντέλου. Ένας φοιτητής σε ίδρυμα με απενεργοποιημένη τη λειτουργία δεν έχει κανένα AI score σε καμία υποβολή, είτε είναι humanized είτε όχι.
Και όπου η αναδιατύπωση ήταν πράγματι δομική, το score μπορεί να μειωθεί επειδή το μετρούμενο μοτίβο άλλαξε. Το Turnitin αναφέρει μια εκτίμηση που υπολογίζεται από τα μοτίβα γραφής, επομένως το κείμενο του οποίου τα μοτίβα διαφέρουν βαθμολογείται διαφορετικά. Ο μηχανισμός λειτουργεί και προς τις δύο κατευθύνσεις, και αυτό είναι το δυσάρεστο σημείο, η πρωτότυπη ανθρώπινη γραφή μερικές φορές βαθμολογείται υψηλά για ακριβώς τον ίδιο λόγο.
Ανθρωποποιήστε τη δική σας εργασία
Μετασχηματίστε το κείμενό σας με τη βοήθεια AI και κάντε το να ακούγεται ανθρώπινο, χωρίς να αγγίξετε σημαντικές λέξεις ή παραπομπές.
Τι ισχυρίζεται κάθε προμηθευτής humanizer, και τι τεκμηριώνεται
Ένας κανόνας διέπει τον πίνακα. Η μεσαία στήλη είναι η ίδια η γλώσσα μάρκετινγκ του προμηθευτή, παρμένη από τον δικό του ιστότοπο όπου αυτός ο ιστότοπος θα μπορούσε να χρησιμεύσει ως πηγή. Η δεξιά στήλη καταγράφει τι πραγματικά στηρίζει κάθε ισχυρισμό, το οποίο στις περισσότερες περιπτώσεις δεν είναι καθόλου κάποιο σύνολο δεδομένων, ημερομηνία ή μέθοδος. Δεν υπάρχει δημόσια δοκιμή άμεσης σύγκρισης για αυτά τα brands.
| Brand | Τι ισχυρίζεται ο προμηθευτής | Τι τεκμηριώνεται |
|---|---|---|
| Undetectable.ai | Αναφέρει την επιτυχία έναντι ανιχνευτών AI ως χαρακτηριστικό του προϊόντος χωρίς να παραθέτει αριθμό, και προσφέρει επιστροφή χρημάτων για την εξανθρώπιση αν το αποτέλεσμα επισημανθεί ως μη ανθρώπινο | Η επιστροφή χρημάτων αποτελεί εμπορικό όρο, δεν υπάρχει σύνολο δεδομένων, ημερομηνία ή αποτέλεσμα ανά ανιχνευτή που να στηρίζει τον ισχυρισμό |
| QuillBot | Δεν προβάλλει ισχυρισμό ανίχνευσης ή παράκαμψης για τη λειτουργία humanizer στις δικές του σελίδες. Ο ξεχωριστός ανιχνευτής AI περιγράφεται μόνο ως ανιχνευτής περιεχομένου που έχει παραχθεί από AI | Το QuillBot πωλεί το humanizer μέσα σε μια γενική σουίτα γραφής και δεν διατυπώνει για αυτόν ισχυρισμό ειδικό για το Turnitin |
| WriteHuman | Κατατάσσεται πρώτο σε έναν Humanizer Leaderboard, και περιγράφεται ως το premium AI humanizer για σοβαρή γραφή | Ο πίνακας κατάταξης δεν παραθέτει μεθοδολογία ή δείγμα, και το WriteHuman δεν συνοδεύει την κατάταξη με αριθμητικό ποσοστό ακρίβειας |
| Walter Writes AI | Προωθεί ευρεία εξανθρώπιση σε 80+ γλώσσες χωρίς ισχυρισμό ειδικό για το Turnitin | Δεν υπάρχουν δεδομένα δοκιμής προς καμία κατεύθυνση |
| HIX Bypass | Προωθεί σελίδες παράκαμψης ανά ανιχνευτή χωρίς ποσοστό ειδικό για το Turnitin | Το HIX Bypass και το BypassGPT είναι ξεχωριστά προϊόντα σε ξεχωριστούς τομείς, επομένως πρέπει να επιβεβαιωθεί ποιο από τα δύο περιγράφει ένας ισχυρισμός |
| StealthGPT | Μέσο ποσοστό ανθρώπινης αναγνώρισης 98% στο Turnitin και 95% στο GPTZero, το καθένα από δηλωμένη εκτέλεση 30 δειγμάτων με μηδενικές ανιχνεύσεις, καθώς και εγγύηση επιστροφής χρημάτων αν ένας συνδρομητής ανιχνευθεί | Αυτοαναφερόμενο. Δεν δημοσιεύονται δίπλα στα ποσοστά σύνολο δεδομένων, επιλογή δείγματος, ημερομηνία ή μέθοδος, και τα 30 έγγραφα αποτελούν μικρή εκτέλεση για ισχυρισμό σχετικά με μοντέλο που βαθμολογεί εκατομμύρια υποβολές |
| Phrasly | Τοποθετείται ως remover ανίχνευσης AI, δεν δημοσιεύει δεδομένα δοκιμής | Δεν υπάρχει δημόσιος ισχυρισμός προς καμία κατεύθυνση. Τα ποσοστά που κυκλοφορούν σε κριτικές είναι έμμεσα και αποκλείονται εδώ κατ' αρχήν |
| Grammarly | Δεν προωθεί καθόλου την αναδιατύπωσή του ως παράκαμψη ανίχνευσης. Η σελίδα του ανιχνευτή AI ισχυρίζεται ακρίβεια ανίχνευσης 99% και κατάταξη αριθμός ένα στο ανεξάρτητο benchmark του RAID | Η ίδια σελίδα του Grammarly αναφέρει ότι κανένας ανιχνευτής AI δεν είναι 100% ακριβής. Η λειτουργία Authorship επισημαίνει το κείμενο ως πληκτρολογημένο από άνθρωπο, δημιουργημένο με AI ή επεξεργασμένο με Grammarly |
| TextPulse | Ποσοστό επιτυχίας 92.33% στο Turnitin AI, 89.12% στο Originality.ai και 87.91% στο GPTZero, μετρημένο σε ακαδημαϊκό σώμα 2,000 εγγράφων | Μετρημένο και δημοσιευμένο από το TextPulse, άρα αυτοαναφερόμενο όπως κάθε ποσοστό παραπάνω. Το μέγεθος του σώματος κειμένων και οι ανιχνευτές κατονομάζονται, δεν υπόσχεται όμως κανένα αποτέλεσμα ανιχνευτή για μεμονωμένο έγγραφο |
Τρία πράγματα προκύπτουν από εκείνον τον πίνακα. Τα περισσότερα από αυτά τα εργαλεία δεν δημοσιεύουν καθόλου ισχυρισμό ανιχνευτή προς έλεγχο. Μερικά συνδέουν ένα μέγεθος δείγματος με έναν αριθμό, κάτι που είναι περισσότερο από ό,τι καταφέρνει η υπόλοιπη κατηγορία. Και κανένα από αυτά δεν δημοσιεύει ένα σύνολο δεδομένων που να μπορεί να εκτελέσει ο καθένας εκτός της εταιρείας μόνος του. Πρέπει όμως να αποδοθεί η εύλογη αναγνώριση εκεί όπου κάθε brand την κερδίζει. Το Undetectable.ai τοποθετεί μια επιστροφή χρημάτων πίσω από τον ισχυρισμό του, κάτι που αποτελεί συγκεκριμένη δέσμευση και όχι επίθετο. Το WriteHuman δημοσιεύει ακριβή όρια αιτημάτων και λέξεων ανά επίπεδο, ώστε ο αγοραστής να γνωρίζει τι λαμβάνει. Το Grammarly προσδιορίζει τη δική του τιμή ακρίβειας στην ίδια σελίδα όπου τη διατυπώνει, κάτι που είναι περισσότερο από ό,τι κάνουν οι περισσότεροι προμηθευτές ανιχνευτών. Και το ότι το QuillBot αρνείται να διατυπώσει καθόλου ισχυρισμό παράκαμψης είναι η πιο υπερασπίσιμη θέση στον κατάλογο.
Γιατί κανείς εκτός του προμηθευτή δεν μπορεί να ελέγξει αυτούς τους αριθμούς
Ένας προμηθευτής humanizer που ισχυρίζεται ποσοστό επιτυχίας στο Turnitin περιγράφει εκτελέσεις που έγιναν μέσω λογαριασμού τον οποίο ελέγχει, σε έγγραφα που επέλεξε ο ίδιος, σε μια ημερομηνία που συνήθως δεν δηλώνει, απέναντι σε έναν ταξινομητή τον οποίο το Turnitin αναθεωρεί καθώς κυκλοφορούν νέα γλωσσικά μοντέλα. Αυτό ισχύει για το ποσοστό τριάντα δειγμάτων του StealthGPT και ισχύει εξίσου για το ποσοστό 2,000 εγγράφων που δημοσιεύει αυτός ο ιστότοπος. Το μέγεθος του σώματος κειμένων αλλάζει πόσος θόρυβος βρίσκεται μέσα σε έναν αριθμό. Δεν μετατρέπει μια αυτοαναφορά σε έλεγχο.
Το άλλο μισό του προβλήματος είναι ότι ο ίδιος ο κατάλογος του Turnitin με τα μοντέλα που ισχυρίζεται ότι ανιχνεύει επιμελείται εκ νέου καθώς φτάνουν νέες εκδόσεις. Αυτό το ποσοστό επιτυχίας, μετρημένο απέναντι στον ταξινομητή του προηγούμενου τριμήνου, περιγράφει τον ταξινομητή του προηγούμενου τριμήνου και τίποτε άλλο. Γιατί αυτό σημαίνει ότι κανείς δεν μπορεί να κατονομάσει ένα καλύτερο AI humanizer για να παρακάμψει το Turnitin εκτίθεται ξεχωριστά. Κάθε αριθμός σε κάθε αρχική σελίδα humanizer, συμπεριλαμβανομένου αυτού του ιστότοπου, είναι ένα στιγμιότυπο που φέρει μια ημερομηνία την οποία ο προμηθευτής μπορεί να μην έχει δημοσιεύσει ποτέ.
Πώς να διαβάζετε έναν ισχυρισμό παράκαμψης πριν πληρώσετε για αυτόν
Τέσσερις ερωτήσεις διαχωρίζουν έναν ισχυρισμό που αξίζει να σταθμιστεί από έναν ισχυρισμό που αξίζει να αγνοηθεί, και εφαρμόζονται σε κάθε γραμμή του παραπάνω πίνακα, συμπεριλαμβανομένης της τελευταίας.
- Πόσα έγγραφα δοκιμάστηκαν και ποιος τα επέλεξε; Ένα ποσοστό χωρίς μέγεθος δείγματος πίσω του είναι ένα σύνθημα που φοράει αριθμό.
- Σε ποια ημερομηνία και απέναντι σε ποια έκδοση του ανιχνευτή; Τα μοντέλα ανίχνευσης αναθεωρούνται καθώς κυκλοφορούν νέα γλωσσικά μοντέλα, και ένα ποσοστό επιτυχίας χωρίς ημερομηνία παλιώνει γρήγορα.
- Η εγγύηση είναι επιστροφή χρημάτων ή αποτέλεσμα; Μια υπόσχεση επιστροφής χρημάτων μεταφέρει έναν μικρό οικονομικό κίνδυνο και δεν κάνει απολύτως τίποτα για μια επιτροπή ακαδημαϊκής ακεραιότητας.
- Τι λέει ο προμηθευτής ότι συμβαίνει σε μια παραπομπή, έναν τεχνικό όρο ή ένα εκτενές παράθεμα; Οι περισσότερες σελίδες humanizer δεν λένε τίποτα, κάτι που από μόνο του αποτελεί απάντηση.
Αυτή η τελευταία ερώτηση κρίνει περισσότερα από ό,τι η αριθμητική του ανιχνευτή για όποιον υποβάλλει ακαδημαϊκή εργασία. Μια αναδιατύπωση που βαθμολογείται καλά και γενικεύει αθόρυβα μια πρόταση της μεθοδολογίας σας έχει κοστίσει αυτό για το οποίο αξιολογούσασταν. Το ακαδημαϊκό humanizer του TextPulse τεκμηριώνει τη διατήρηση παραπομπών σε APA, MLA, IEEE, Chicago, Harvard και Vancouver, τις παγωμένες λέξεις για κλείδωμα της ακριβούς ορολογίας πριν εκτελεστεί μια διέλευση, και την εκπαίδευση σε ακαδημαϊκό κείμενο με αξιολόγηση από ομότιμους, με την έξοδο να διατηρείται στο Flesch-Kincaid grade 13 to 18. Αυτές είναι ισχυρισμοί για το τι συμβαίνει στο κείμενο, και αυτό είναι διαφορετικό είδος ισχυρισμού από ένα ποσοστό για έναν ανιχνευτή, και ο αναγνώστης μπορεί να τους επαληθεύσει στην έξοδο μέσα σε ένα λεπτό.
Τι Σημαίνει η Βαθμολογία για έναν Φοιτητή σε Κάθε Περίπτωση
Το Turnitin είναι σαφές όταν δηλώνει ότι ο δείκτης AI writing δεν αποτελεί διαπίστωση παραπτώματος. Η σελίδα προϊόντος του Turnitin δηλώνει ρητά ότι το Turnitin Originality "does not make a determination of misconduct through our AI writing detection (or similarity checking) technology." Επίσης, καθιστά σαφές ότι το Turnitin παρέχει πληροφορίες ώστε οι διδάσκοντες να μπορούν να λάβουν τεκμηριωμένη απόφαση με βάση τις πολιτικές του ιδρύματός τους. Αυτό επαναλαμβάνεται με την προειδοποίηση ότι το μοντέλο "may not always be accurate (it may misidentify human-written, AI-generated, and AI-paraphrased text), so it should not be used as the sole basis for adverse actions against a student."
Οι φοιτητές δεν βλέπουν τη βαθμολογία από προεπιλογή. Η Turnitin δηλώνει ρητά ότι ο δείκτης και η αναφορά ανίχνευσης AI writing δεν είναι ορατά στους φοιτητές, και ο μόνος τρόπος να τα δει κανείς είναι να κατεβάσει ο διδάσκων την αναφορά ως PDF και να τη δώσει στον φοιτητή. Ένας φοιτητής που ελέγχει το δικό του προσχέδιο ελέγχει ένα διαφορετικό εργαλείο, εκπαιδευμένο σε διαφορετικά δεδομένα, και οι δύο αριθμοί δεν έχουν καμία υποχρέωση να συμφωνούν.
Αυτό αφήνει το μέρος που καμία βαθμολογία δεν επιλύει. Το αν επιτρεπόταν καθόλου η χρήση AI είναι ζήτημα του μαθήματος και του ιδρύματος, και μια πολιτική χρήσης AI το απαντά με τρόπο που ένα ποσοστό ποτέ δεν το κάνει. Μια υψηλή βαθμολογία σε επιτρεπόμενη, δηλωμένη χρήση είναι μια συζήτηση με αποδεικτικά στοιχεία πίσω της. Μια χαμηλή βαθμολογία σε αδήλωτη χρήση που η πολιτική απαγορεύει είναι και πάλι αδήλωτη χρήση.
Για έναν συγγραφέα που επεξεργάζεται το δικό του προσχέδιο, η πρακτική ανάγνωση όλων αυτών είναι ότι η βαθμολογία ακολουθεί το κείμενο. Το μοντέλο της Turnitin μετρά το μοτίβο σε επίπεδο πρότασης σε ολόκληρο το έγγραφο, έτσι οι μερικές αναδιατυπώσεις παράγουν μερική μεταβολή και οι αλλαγές λεξιλογίου προκαλούν πολύ μικρή μεταβολή, αν προκαλούν καθόλου. Η πλήρης παρουσίαση του πώς να humanize AI text εξετάζει τις δομικές επεξεργασίες που αλλάζουν το μοτίβο, με τη σειρά που το μεταβάλλει περισσότερο.
Το AI humanizer του TextPulse εφαρμόζει αυτές τις δομικές επεξεργασίες σε ολόκληρο το έγγραφο ταυτόχρονα και αναφέρει μια εκτιμώμενη Human Score που υπολογίζεται από το ίδιο το κείμενο, ποτέ μια πρόβλεψη για το τι θα πει οποιοσδήποτε κατονομαζόμενος ανιχνευτής. Κανένα εργαλείο δεν μπορεί να εγγυηθεί αποτέλεσμα στην Turnitin, επειδή κανένα εργαλείο δεν μπορεί να δει μέσα στο μοντέλο της Turnitin. Οποιοδήποτε προϊόν ισχυρίζεται το αντίθετο περιγράφει ένα αποτέλεσμα που δεν έχει τρόπο να παρατηρήσει.
Η διάκριση μεταξύ humanizer και paraphraser έχει σημασία εδώ, όπως και ο λόγος για τον οποίο το παραφρασμένο κείμενο εξακολουθεί να επισημαίνεται.
Ο αριθμός είναι το λιγότερο ενδιαφέρον μέρος αυτού. Αυτό που καθορίζει το αποτέλεσμα είναι τα είκοσι λεπτά αφότου ένας αξιολογητής το εξετάσει: αν το κείμενο μπορεί να δείξει τη διαδικασία του, ένα ιστορικό προσχεδίων, ένα σύνολο σημειώσεων, πηγές για τις οποίες ο συγγραφέας μπορεί να μιλήσει χωρίς να τις ανοίξει. Αυτά τα αποδεικτικά στοιχεία είναι διαθέσιμα σε όποιον έκανε την εργασία, και επιβιώνουν από μια βαθμολογία που μια αναδιατύπωση δεν κατάφερε να μεταβάλει.
Συχνές ερωτήσεις
Η ίδια η καθοδήγηση του Turnitin λέει ότι ο δείκτης AI περιλαμβάνει την ανίχνευση περιεχομένου που μπορεί να έχει εξανθρωπιστεί ή να έχει περάσει από bypasser. Αυτό που παράγει στην πράξη το προϊόν είναι ένα ποσοστό του κειμένου που πληροί τα κριτήρια, όχι μια κρίση για τη συγγραφή. Άρα η πρακτική απάντηση στο αν μπορεί το Turnitin να ανιχνεύσει εξανθρωπισμένο κείμενο είναι ότι η βαθμολογία αντανακλά πόσο από το μοτίβο της μηχανικής γραφής παρέμεινε μετά την αναδιατύπωση.
Content strategist at TextPulse, here since the company started. Mark writes the product and technical coverage: how the humanizer works under the hood, what changes in each release, and what a specification actually means for your writing. His reviews of writing software come from using them on real documents rather than reading a feature list.