Những trường đại học nào đã ngừng dùng bộ phát hiện AI của Turnitin

Danh sách các trường đại học đã ngừng sử dụng tính năng phát hiện AI của Turnitin ngắn hơn, và được ghi chép tốt hơn, so với những gì kết quả tìm kiếm khiến người ta tưởng. Ba cơ sở ở Mỹ, Vanderbilt University, Michigan State University và the University of Texas at Austin, mỗi trường đều đã công bố trang riêng xác nhận rằng họ đã tắt tính năng này, nêu lý do của mình bằng chính lời lẽ của họ. Không trường nào trong ba trường ngừng sử dụng Turnitin nói chung.

Câu cuối cùng đó là phần mà hầu hết các bản tổng hợp bỏ qua. Turnitin cung cấp hai sản phẩm trong một giao diện: một công cụ kiểm tra độ tương đồng so sánh bài viết của sinh viên với cơ sở dữ liệu văn bản, một dịch vụ đã tồn tại từ rất lâu trước khi AI sinh tạo ra đời, và một chỉ báo viết AI, một bộ phân loại chấm điểm văn xuôi của bài viết dựa trên mức độ nó giống đầu ra của máy. Tính năng mới này được triển khai vào tháng 4 năm 2023. Chỉ sản phẩm thứ hai bị tắt bởi mọi cơ sở dưới đây.

Phần tiếp theo trình bày lý do mà ba trường đại học đưa ra bằng chính lời lẽ của họ, hai tên nữa thường được báo chí nhắc lại nhưng không có trang do chính cơ sở sở hữu để xác nhận, và điều mà một quản trị viên thực sự thay đổi khi họ đưa ra quyết định này.

Có Trường Đại Học Nào Ngừng Sử Dụng Turnitin Hoàn Toàn Không?

Không có trường hợp nào được xác nhận như vậy. Mọi ví dụ được ghi nhận đều là một trường đại học vô hiệu hóa một cài đặt cụ thể bên trong một sản phẩm mà họ vẫn tiếp tục sử dụng. Hướng dẫn chính thức của Turnitin giải thích vì sao sự phân biệt này lại có thể tồn tại: quản trị viên "have the option to enable/disable the AI writing feature from their admin settings page," và việc làm như vậy "will remove the AI writing indicator and report from the Similarity report," trong khi vẫn để báo cáo độ tương đồng tiếp tục hoạt động.

Similarity Score và AI Score là hai báo cáo riêng biệt, độc lập, theo chính lời của Turnitin, được xây dựng trên các mô hình khác nhau và hiển thị trên các thẻ khác nhau của cùng một giao diện. TextPulse đã trình bày Similarity Score và AI Score thực sự khác nhau như thế nào chi tiết hơn ở nơi khác. Một trường đại học có thể tắt sản phẩm thứ hai mà không động đến sản phẩm thứ nhất, và mọi trường hợp dưới đây đều đã làm đúng như vậy.

Vanderbilt University: Giải Thích Công Khai Chi Tiết Nhất

Vanderbilt đã vô hiệu hóa bộ phát hiện AI của Turnitin vào ngày 16 tháng 8 năm 2023, và công bố lý do của mình ngay trong cùng ngày thay vì để giới báo chí tự ghép nối. Phép tính của chính trường đại học là phiên bản rõ ràng nhất của lập luận mà bất kỳ cơ sở nào từng công bố: Turnitin đã tuyên bố tỷ lệ dương tính giả là 1%, và đối chiếu với khoảng 75,000 bài mà Vanderbilt đã nộp cho Turnitin trong năm 2022, trường tính rằng tỷ lệ đó có nghĩa là "khoảng 750 bài của sinh viên có thể đã bị gắn nhãn sai là có một phần được viết bởi AI."

Vanderbilt nêu thêm hai lý do cùng với phép tính đó: sự thiên lệch đã được ghi nhận đối với người viết tiếng Anh không phải bản ngữ, và mức độ minh bạch không đủ về cách mô hình nền tảng thực sự đi đến điểm số của nó. Ba mối quan ngại đó, một số lượng dương tính giả quá lớn để có thể bỏ qua, một vấn đề thiên lệch, và một mô hình thiếu minh bạch, xuất hiện dưới một hình thức nào đó ở gần như mọi cơ sở đã công khai giải thích việc không sử dụng kể từ đó.

Cơ sở	Hành động	Ngày	Lý do được nêu, theo đúng lời của cơ sở
Vanderbilt University	Vô hiệu hóa chỉ báo viết bằng AI trên toàn bộ tài khoản	August 16, 2023	Tỷ lệ dương tính giả được tuyên bố là 1% khi áp dụng vào khối lượng bài nộp của chính trường, sự thiên lệch đối với người viết tiếng Anh không phải bản ngữ, thiếu minh bạch của mô hình
Michigan State University	Không cung cấp khả năng phát hiện viết bằng AI cho giảng viên	Hướng dẫn đề ngày August 2023	Các công cụ phát hiện AI không nên được dùng làm căn cứ duy nhất cho bất kỳ biện pháp bất lợi nào đối với sinh viên
University of Texas at Austin	Cấm sử dụng phần mềm phát hiện AI đối với bài làm của sinh viên	Không nêu ngày trên trang riêng của UT Austin, được liệt kê trong số các cơ sở không sử dụng trước February 2024	Xếp phần mềm phát hiện AI vào nhóm Rủi ro Cao, viện dẫn các quan ngại về bản quyền, sở hữu trí tuệ và FERPA

Michigan State và UT Austin, Hai Trường Hợp Không Sử Dụng Được Xác Nhận Thêm

Tài liệu trợ giúp của Michigan State nêu rõ: "Turnitin AI Detection is not currently available at MSU." Hướng dẫn này bổ sung một cảnh báo áp dụng bất kể khóa học sử dụng bộ phát hiện nào: các công cụ phát hiện AI "should not be used as the sole basis for adverse actions against a student." Trang này nằm trong hướng dẫn rộng hơn của MSU về AI tạo sinh, có ngày tháng từ tháng 8 năm 2023, cùng tháng Vanderbilt công bố quyết định của riêng mình.

UT Austin đã chọn lập trường bao quát hơn trong ba trường. Văn phòng Provost của trường khẳng định thẳng rằng trường "does not endorse the use of AI Detection Software and does not have any central contracts or purchase orders with active AI Detection Software features." Trang này đi xa hơn một lựa chọn từ chối đơn giản, nó phân loại phần mềm phát hiện AI là "High Risk," nghĩa là một khoa không thể mua phần mềm này ngay cả bằng thẻ mua sắm, và cảnh báo rằng việc đưa bài làm của sinh viên qua phần mềm như vậy "may be a violation of that student's copyright and intellectual property rights," cùng với các lo ngại riêng về FERPA. Trang riêng của UT Austin không nêu ngày quyết định cụ thể, nhưng các bài báo giáo dục đã đưa trường vào danh sách các cơ sở đã từ chối sử dụng vào tháng 2 năm 2024.

Các trường đại học khác đã ngừng sử dụng Turnitin, theo báo chí

Có hai trường khác thường xuất hiện khi tổng hợp các bài viết về câu chuyện này, Northwestern University và Montclair State University. Cả hai đều tồn tại, nhưng không được các nguồn đáng tin cậy trích dẫn ở mức độ như ba trường còn lại. Vào tháng 2 năm 2024, Inside Higher Ed đưa tin rằng Montclair "announced in November [2023]... that academics should not use the AI-detector feature in a tool from Turnitin," sau "similar moves from institutions including Vanderbilt University, the University of Texas at Austin and Northwestern University.".

Đó là nguồn tin cậy từ báo chí chuyên ngành, nhưng đó là một tiêu chuẩn khác với việc chính trang của một cơ sở nêu quyết định bằng chính lời của mình, và khi nghiên cứu bài viết này, không tìm thấy trang như vậy cho cả hai trường đại học. Khoảng trống này đáng được nêu rõ thay vì làm cho trôi đi. Một danh sách được lập từ mọi lần báo chí nhắc đến sẽ dài hơn ba tên, còn một danh sách được lập từ những gì một cơ sở thực sự công bố cho chính mình hiện chỉ dừng ở ba, và đó là tiêu chuẩn chặt chẽ hơn mà bài viết này giữ nhất quán từ đầu đến cuối.

Tại sao các trường đại học lại tắt công cụ phát hiện AI?

Cùng một số lý do lặp lại trong mọi tuyên bố công khai ở trên: tỷ lệ dương tính giả không còn nhỏ khi được nhân lên với quy mô thực tế của một quần thể sinh viên, sự thiên lệch đã được ghi nhận đối với người viết tiếng Anh không phải bản ngữ, và một bộ phân loại mà nhà cung cấp chưa công bố đầy đủ cơ chế hoạt động bên trong. Lập luận này phù hợp với bằng chứng rộng hơn về việc các công cụ phát hiện AI có thực sự chính xác hay không, không chỉ riêng ở Turnitin. Không có cơ sở nào trong ba cơ sở nêu trên phủ nhận rằng công cụ kiểm tra độ tương đồng của Turnitin vẫn thực hiện đúng chức năng ban đầu của nó, phản đối chỉ nhắm vào một tính năng được bổ sung.

Điều này không có nghĩa là một trường đại học vẫn bật tính năng đó đang hành động cẩu thả, và cũng không có nghĩa là một trường đại học đã tắt nó đã giải quyết được vấn đề nền tảng. Điều đó có nghĩa là hai nhóm quản trị viên đã xem cùng một số liệu được công bố và đi đến những đánh giá khác nhau, và trải nghiệm của sinh viên đối với công nghệ này hiện phụ thuộc một phần vào việc họ học ở trường nào hơn là vào bất cứ điều gì liên quan đến bài viết mà họ nộp.

Một người viết đang tự hỏi liệu bản thảo của mình có mang hồ sơ thống kê như điều mà lập luận về thiên lệch của Vanderbilt mô tả hay không có thể kiểm tra trực tiếp bằng một công cụ kiểm tra perplexity miễn phí thay vì chờ xem chính sách mà trường đại học của mình đã chọn là gì.

Các bằng chứng đứng sau những quyết định đó được trình bày riêng: dương tính giả thực sự là gì, và tỷ lệ dương tính giả mà chính Turnitin công bố.

các công cụ miễn phí của TextPulse bao quát cùng phạm vi đó trước khi bất kỳ nội dung nào trong số đó thực sự đến được một bộ phát hiện. Turnitin sẽ tiếp tục điều chỉnh các ngưỡng của chính mình khi nó huấn luyện lại mô hình, việc một trường đại học cụ thể hiện có đang chạy tính năng này hay không là một thiết lập, không phải là một तथ्य về chính bài viết, và đáng để kiểm tra một bản thảo theo các tiêu chí riêng của nó bất kể thiết lập đó trong học kỳ này đang được chuyển sang phía nào.