มหาวิทยาลัยใดบ้างที่หยุดใช้ตัวตรวจจับ AI ของ Turnitin

รายชื่อมหาวิทยาลัยที่หยุดใช้ฟีเจอร์ตรวจจับ AI ของ Turnitin สั้นกว่าที่ผลการค้นหาทำให้ดู และมีเอกสารอ้างอิงรองรับดีกว่า มีสถาบันในสหรัฐอเมริกา 3 แห่ง, Vanderbilt University, Michigan State University และ University of Texas at Austin, ที่แต่ละแห่งได้เผยแพร่หน้าของตนเองเพื่อยืนยันว่าปิดฟีเจอร์นี้ พร้อมระบุเหตุผลด้วยถ้อยคำของตนเอง ไม่มีสถาบันใดใน 3 แห่งนี้เลิกใช้ Turnitin ทั้งหมด

ประโยคสุดท้ายนั้นคือส่วนที่บทสรุปส่วนใหญ่มักข้ามไป Turnitin มีผลิตภัณฑ์ 2 อย่างอยู่ในอินเทอร์เฟซเดียวกัน, ตัวตรวจสอบความคล้ายคลึงที่เปรียบเทียบงานเขียนของนักศึกษากับฐานข้อมูลข้อความ, ซึ่งเป็นบริการที่มีมาก่อนการประดิษฐ์ generative AI นานแล้ว, และตัวบ่งชี้การเขียนด้วย AI, ซึ่งเป็นตัวจำแนกที่ให้คะแนนร้อยแก้วของงานเขียนว่ามีลักษณะคล้ายผลลัพธ์จากเครื่องมากเพียงใด ฟีเจอร์ใหม่นี้เริ่มใช้งานจริงในเดือนเมษายน 2023 มีเพียงผลิตภัณฑ์ตัวที่ 2 เท่านั้นที่ถูกปิดโดยทุกสถาบันด้านล่าง

ต่อไปนี้คือเหตุผลที่มหาวิทยาลัย 3 แห่งให้ไว้ด้วยถ้อยคำของตนเอง, อีก 2 ชื่อที่สื่อมวลชนมักกล่าวซ้ำแต่ไม่มีหน้าที่เป็นของสถาบันยืนยันไว้, และสิ่งที่ผู้ดูแลระบบกำลังเปลี่ยนจริง ๆ เมื่อพวกเขาตัดสินใจเช่นนี้

มีมหาวิทยาลัยใดหยุดใช้ Turnitin ทั้งหมดหรือไม่?

ไม่มีกรณีที่ยืนยันได้ว่ามีเช่นนั้น ทุกตัวอย่างที่มีเอกสารรองรับเป็นการที่มหาวิทยาลัยปิดการตั้งค่าเฉพาะหนึ่งอย่างภายในผลิตภัณฑ์ที่ยังคงใช้อยู่ Turnitin เองอธิบายเหตุผลที่ความแตกต่างนี้เป็นไปได้ว่า ผู้ดูแลระบบ "have the option to enable/disable the AI writing feature from their admin settings page," และการทำเช่นนั้น "will remove the AI writing indicator and report from the Similarity report," โดยที่รายงานความคล้ายคลึงยังคงทำงานต่อไป

Similarity Score และ AI Score เป็นรายงาน 2 รายการที่แยกจากกันและเป็นอิสระต่อกัน ตามถ้อยคำของ Turnitin เอง, สร้างขึ้นบนโมเดลที่ต่างกันและแสดงในแท็บที่ต่างกันของอินเทอร์เฟซเดียวกัน TextPulse ได้อธิบาย ว่า similarity score และ AI score แตกต่างกันจริงอย่างไร ไว้ละเอียดกว่านี้ในที่อื่น มหาวิทยาลัยสามารถปิดตัวที่ 2 โดยไม่แตะต้องตัวแรก และทุกกรณีด้านล่างก็ทำเช่นนั้นจริง

Vanderbilt University: คำอธิบายสาธารณะที่ละเอียดที่สุด

Vanderbilt ได้ปิดใช้งานตัวตรวจจับ AI ของ Turnitin เมื่อวันที่ 16 สิงหาคม 2023 และเผยแพร่เหตุผลในวันเดียวกัน แทนที่จะปล่อยให้ผู้สื่อข่าวต้องรวบรวมเรื่องราวเอง การคำนวณของมหาวิทยาลัยเองเป็นรูปแบบที่ชัดเจนที่สุดของข้อโต้แย้งที่สถาบันใดก็ตามได้เปิดเผยต่อสาธารณะ, Turnitin เคยอ้างอัตราผลบวกลวง 1 เปอร์เซ็นต์ และเมื่อเทียบกับเอกสารประมาณ 75,000 ฉบับที่ Vanderbilt ส่งให้ Turnitin ในปี 2022 มหาวิทยาลัยคำนวณว่าอัตรานั้นหมายความว่า "around 750 student papers could have been incorrectly labeled as having some of it written by AI."

Vanderbilt ให้เหตุผลเพิ่มเติมอีกสองประการควบคู่ไปกับการคำนวณนั้น, คืออคติที่มีการบันทึกไว้ต่อ ผู้เขียนภาษาอังกฤษที่ไม่ใช่เจ้าของภาษา และความโปร่งใสที่ไม่เพียงพอเกี่ยวกับวิธีที่แบบจำลองพื้นฐานไปถึงคะแนนของมันจริง ๆ ข้อกังวลทั้งสามประการนี้, จำนวนผลบวกลวงที่มากเกินกว่าจะมองข้ามได้, ปัญหาอคติ และแบบจำลองที่ไม่โปร่งใส, ปรากฏในรูปแบบใดรูปแบบหนึ่งในเกือบทุกสถาบันที่ได้อธิบายการไม่เลือกใช้ต่อสาธารณะนับแต่นั้นมา

Institution	Action	Date	Stated reason, in the institution's own words
Vanderbilt University	Disabled the AI writing indicator account-wide	August 16, 2023	A claimed 1% false positive rate applied to its own submission volume; bias against non-native English writers; lack of model transparency
Michigan State University	AI writing detection not made available to instructors	Guidance dated August 2023	AI detection tools should not be used as the sole basis for adverse action against a student
University of Texas at Austin	Bans use of AI detection software on student work	No date stated on UT Austin's own page; listed among opted-out institutions by February 2024	Classifies AI detection software as High Risk; cites copyright, intellectual property and FERPA concerns

Michigan State และ UT Austin, การไม่เลือกใช้ที่ได้รับการยืนยันเพิ่มเติมอีกสองกรณี

เอกสารช่วยเหลือของ Michigan State ระบุอย่างชัดเจนว่า: "Turnitin AI Detection is not currently available at MSU." คำแนะนำของเอกสารยังเพิ่มข้อควรระวังที่ใช้ได้ไม่ว่าหลักสูตรใดจะใช้เครื่องตรวจจับใดก็ตาม, เครื่องมือการตรวจจับ AI "should not be used as the sole basis for adverse actions against a student." หน้านี้อยู่ภายในแนวทางเกี่ยวกับ generative-AI ที่กว้างกว่าของ MSU, ลงวันที่ August 2023, ซึ่งเป็นเดือนเดียวกับที่ Vanderbilt เปิดเผยการตัดสินใจของตนเองต่อสาธารณะ

UT Austin มีจุดยืนที่ครอบคลุมกว่าสามสถาบันอื่น มหาวิทยาลัย's Office of the Provost ระบุอย่างตรงไปตรงมาว่า "does not endorse the use of AI Detection Software and does not have any central contracts or purchase orders with active AI Detection Software features." หน้านี้ไปไกลกว่าการเพียงไม่เลือกใช้, โดยจัดประเภท AI detection software เป็น "High Risk," หมายความว่าภาควิชาไม่สามารถซื้อได้แม้ด้วยบัตรจัดซื้อ, และยังเตือนว่าการนำงานของนักศึกษาผ่านซอฟต์แวร์ดังกล่าว "may be a violation of that student's copyright and intellectual property rights," ควบคู่ไปกับข้อกังวลแยกต่างหากเกี่ยวกับ FERPA. หน้าของ UT Austin เองไม่ได้ระบุวันที่ตัดสินใจที่เฉพาะเจาะจง, แต่การรายงานของสื่อการศึกษาก็มีมหาวิทยาลัยนี้อยู่ในรายชื่อสถาบันที่ไม่เลือกใช้แล้วภายใน February 2024

มหาวิทยาลัยอื่นที่หยุดใช้ Turnitin, ตามรายงานของสื่อ

ยังมีอีกสองแห่งที่มักปรากฏเมื่อสรุปข่าวเกี่ยวกับเรื่องนี้, ได้แก่ Northwestern University และ Montclair State University. ทั้งสองแห่งมีอยู่จริง, แต่ไม่มีการอ้างถึงโดยแหล่งข้อมูลที่น่าเชื่อถือในระดับเดียวกับอีกสามแห่ง. ใน February 2024, Inside Higher Ed รายงานว่า Montclair "announced in November [2023]... that academics should not use the AI-detector feature in a tool from Turnitin," ตามหลัง "similar moves from institutions including Vanderbilt University, the University of Texas at Austin and Northwestern University.".

นั่นเป็นการอ้างอิงจากสื่อการค้าอย่างมั่นคง แต่เป็นมาตรฐานที่แตกต่างจากหน้าของสถาบันเองซึ่งระบุการตัดสินใจด้วยถ้อยคำของสถาบันเอง และในการค้นคว้าสำหรับบทความนี้ไม่พบหน้าดังกล่าวของมหาวิทยาลัยทั้งสองแห่ง ช่องว่างนี้ควรระบุให้ชัดเจน มากกว่าจะทำให้ดูราบรื่นขึ้น รายชื่อที่สร้างจากการกล่าวถึงในสื่อทุกชิ้นจะยาวกว่าสามชื่อ, แต่รายชื่อที่สร้างจากสิ่งที่สถาบันได้เผยแพร่ด้วยตนเองจริง ๆ ในปัจจุบันหยุดอยู่ที่สามชื่อ, ซึ่งเป็นมาตรฐานที่เข้มงวดกว่าที่บทความนี้ยึดถือมาตลอด

ทำไมมหาวิทยาลัยจึงปิด AI Detector?

เหตุผลชุดเดิมปรากฏซ้ำในทุกถ้อยแถลงสาธารณะข้างต้น, ได้แก่ อัตรา false positive ที่ไม่ดูเล็กอีกต่อไปเมื่อคูณกับจำนวนนักศึกษาจริง, อคติที่มีการบันทึกไว้ต่อผู้เขียนภาษาอังกฤษที่ไม่ใช่เจ้าของภาษา, และตัวจำแนกที่ผู้ให้บริการยังไม่ได้เปิดเผยการทำงานภายในอย่างครบถ้วน เหตุผลนี้สอดคล้องกับหลักฐานที่กว้างกว่ากรณี ว่า AI detectors แม่นยำจริงหรือไม่, ไม่ใช่เฉพาะที่ Turnitin เท่านั้น ไม่มีสถาบันใดในสามแห่งข้างต้นโต้แย้งว่า similarity checker ของ Turnitin ยังทำหน้าที่ดั้งเดิมของมันอยู่, ข้อคัดค้านมุ่งเฉพาะไปที่ฟีเจอร์ที่เพิ่มเข้ามาเพียงอย่างเดียว

ทั้งหมดนี้ไม่ได้หมายความว่ามหาวิทยาลัยที่ยังเปิดใช้ฟีเจอร์นี้กำลังทำงานอย่างประมาท, และก็ไม่ได้หมายความว่ามหาวิทยาลัยที่ปิดมันได้แก้ปัญหาพื้นฐานแล้ว สิ่งที่หมายความคือ ผู้บริหารสองกลุ่มมองตัวเลขที่เผยแพร่ชุดเดียวกันแล้วลงความเห็นต่างกัน, และประสบการณ์ของนักศึกษาต่อเทคโนโลยีนี้ในตอนนี้ขึ้นอยู่บางส่วนกับว่าพวกเขาเรียนที่มหาวิทยาลัยใด มากกว่าจะขึ้นอยู่กับสิ่งใดเกี่ยวกับบทความที่พวกเขาส่ง

ผู้เขียนที่สงสัยว่างานร่างของตนเองมีลักษณะทางสถิติแบบที่ข้อคัดค้านเรื่องอคติของ Vanderbilt อธิบายไว้หรือไม่ สามารถตรวจสอบได้โดยตรงด้วย free perplexity checker แทนที่จะรอให้ทราบว่ามหาวิทยาลัยของตนเลือกใช้นโยบายใด

หลักฐานที่อยู่เบื้องหลังการตัดสินใจเหล่านั้นได้อธิบายแยกไว้แล้ว: false positive คืออะไรจริง ๆ, และ อัตรา false positive ที่ Turnitin เผยแพร่เอง.

เครื่องมือฟรีของ TextPulse ครอบคลุมพื้นที่เดียวกันนั้นก่อนที่สิ่งใดจะไปถึงเครื่องตรวจจับเลย Turnitin จะปรับเกณฑ์ของตนเองต่อไปเมื่อมีการฝึกโมเดลใหม่, การที่มหาวิทยาลัยใดมหาวิทยาลัยหนึ่งกำลังเปิดใช้ฟีเจอร์นี้อยู่ในขณะนี้เป็นเพียงการตั้งค่า ไม่ใช่ข้อเท็จจริงเกี่ยวกับตัวบทความเอง และควรตรวจสอบฉบับร่างในฐานะของมันเอง ไม่ว่าการตั้งค่านั้นในภาคการศึกษานี้จะถูกสลับไปทางใดก็ตาม