Quais universidades deixaram de usar o detector de IA do Turnitin

A lista de universidades que deixaram de usar o recurso de detecção de IA do Turnitin é mais curta, e melhor documentada, do que os resultados de busca fazem parecer. Três instituições dos EUA, Vanderbilt University, Michigan State University e the University of Texas at Austin, publicaram cada uma sua própria página confirmando que desativaram o recurso, expondo seus motivos com suas próprias palavras. Nenhuma das três deixou de usar o Turnitin em si.

Essa última frase é a parte que a maioria dos resumos omite. O Turnitin oferece dois produtos em uma única interface, um verificador de similaridade que compara trabalhos de estudantes com um banco de dados de textos, um serviço disponível desde muito antes de a IA generativa ser inventada, e um indicador de escrita por IA, um classificador que atribui uma pontuação à prosa de um trabalho com base em quanto ela se assemelha à produção de máquina. Esse novo recurso entrou em operação em abril de 2023. Apenas o segundo produto foi desativado por todas as instituições abaixo.

O que segue é o raciocínio que três universidades apresentaram com suas próprias palavras, mais dois nomes que a cobertura da imprensa repete sem uma página pertencente à instituição para confirmá-los, e o que um administrador de fato altera ao tomar essa decisão.

Alguma universidade deixou de usar o Turnitin completamente?

Não existe nenhum caso confirmado disso. Todo exemplo documentado é uma universidade desativando uma configuração específica dentro de um produto que, de outro modo, continua usando. A própria orientação do Turnitin explica por que essa distinção é possível: os administradores "have the option to enable/disable the AI writing feature from their admin settings page", e fazer isso "will remove the AI writing indicator and report from the Similarity report", mantendo o relatório de similaridade em funcionamento.

O Similarity Score e o AI Score são dois relatórios separados e independentes, nas palavras do próprio Turnitin, construídos com modelos diferentes e exibidos em abas diferentes da mesma interface. TextPulse já abordou como o Similarity Score e o AI Score realmente diferem com mais detalhes em outro lugar. Uma universidade pode desativar o segundo sem tocar no primeiro, e todos os casos abaixo fizeram exatamente isso.

Vanderbilt University: a explicação pública mais detalhada

Vanderbilt desativou o detector de IA do Turnitin em 16 de agosto de 2023 e publicou sua justificativa no mesmo dia, em vez de deixar que jornalistas a reconstruíssem. A própria aritmética da universidade é a versão mais clara do argumento que qualquer instituição tornou pública: o Turnitin havia afirmado uma taxa de falso positivo de 1%, e, diante dos cerca de 75,000 trabalhos que Vanderbilt submeteu ao Turnitin em 2022, a universidade calculou que essa taxa significava que "cerca de 750 trabalhos de estudantes poderiam ter sido rotulados incorretamente como tendo parte de seu conteúdo escrito por IA."

Vanderbilt apresentou mais dois motivos além dessa aritmética: viés documentado contra escritores que não são falantes nativos de inglês, e transparência insuficiente sobre como o modelo subjacente realmente chega à sua pontuação. Esses três elementos, um número de falsos positivos grande demais para ser descartado, um problema de viés e um modelo opaco, reaparecem, de alguma forma, em quase toda instituição que explicou publicamente uma opção de exclusão desde então.

Instituição	Ação	Data	Motivo declarado, nas próprias palavras da instituição
Vanderbilt University	Desativou o indicador de escrita por IA em toda a conta	16 de agosto de 2023	Uma taxa de falso positivo de 1% alegada, aplicada ao seu próprio volume de submissões; viés contra escritores que não são falantes nativos de inglês; falta de transparência do modelo
Michigan State University	A detecção de escrita por IA não foi disponibilizada aos instrutores	Orientação datada de agosto de 2023	Ferramentas de detecção de IA não devem ser usadas como única base para ação adversa contra um estudante
University of Texas at Austin	Proíbe o uso de software de detecção de IA em trabalhos de estudantes	Nenhuma data informada na própria página da UT Austin; listada entre as instituições que optaram pela exclusão até fevereiro de 2024	Classifica o software de detecção de IA como de Alto Risco; cita preocupações com direitos autorais, propriedade intelectual e FERPA

Michigan State e UT Austin: Mais Duas Exclusões Confirmadas

A própria documentação de ajuda da Michigan State afirma claramente: "Turnitin AI Detection is not currently available at MSU." Sua orientação acrescenta uma advertência que se aplica independentemente de qual detector um curso use: as ferramentas de detecção de IA "should not be used as the sole basis for adverse actions against a student." A página faz parte da orientação mais ampla da MSU sobre IA generativa, datada de agosto de 2023, o mesmo mês em que Vanderbilt tornou pública sua própria decisão.

A UT Austin adotou a posição mais abrangente entre as três. O Office of the Provost da universidade afirma de forma direta que "does not endorse the use of AI Detection Software and does not have any central contracts or purchase orders with active AI Detection Software features." A página vai além de uma simples recusa de uso: classifica o software de detecção de IA como "High Risk", o que significa que um departamento não pode comprá-lo nem mesmo com um cartão de compras, e adverte que submeter o trabalho de um estudante a esse tipo de software "may be a violation of that student's copyright and intellectual property rights," além de preocupações separadas relacionadas à FERPA. A própria página da UT Austin não informa uma data específica da decisão; a cobertura da imprensa educacional já incluía a universidade em sua lista de instituições que optaram por não usar a ferramenta até fevereiro de 2024.

Outras universidades que deixaram de usar Turnitin, segundo a imprensa

Há outras duas que aparecem com frequência quando se reúne a cobertura dessa história: Northwestern University e Montclair State University. Ambas existem, mas nenhuma é citada pelo mesmo nível de fontes confiáveis que as outras três. Em fevereiro de 2024, a Inside Higher Ed informou que Montclair "announced in November [2023]... that academics should not use the AI-detector feature in a tool from Turnitin," following "similar moves from institutions including Vanderbilt University, the University of Texas at Austin and Northwestern University.".

Isso é uma fonte sólida da imprensa especializada, mas é um padrão diferente de uma página própria da instituição afirmando uma decisão com suas próprias palavras, e nenhuma página desse tipo apareceu para nenhuma das duas universidades durante a pesquisa deste texto. Vale a pena nomear essa lacuna em vez de suavizá-la. Uma lista construída a partir de toda menção na imprensa seria mais longa do que três nomes, uma lista construída a partir do que uma instituição realmente publicou para si mesma atualmente termina em três, que é o padrão mais rigoroso ao qual este texto se mantém ao longo de todo o texto.

Por que as universidades estão desativando o detector de IA?

O mesmo pequeno conjunto de razões reaparece em todas as declarações públicas acima: uma taxa de falso positivo que deixa de parecer pequena quando é multiplicada por uma população estudantil real, viés documentado contra escritores que não têm o inglês como língua nativa, e um classificador cujo funcionamento interno o fornecedor não divulgou integralmente. O raciocínio se alinha com as evidências mais amplas sobre se os detectores de IA são de fato precisos, e não apenas no Turnitin. Nenhuma das três instituições acima contesta que o verificador de similaridade do Turnitin ainda cumpre sua função original, a objeção é específica a um recurso adicional.

Nada disso significa que uma universidade que mantém o recurso ativado esteja agindo com descuido, e nada disso significa que uma universidade que o desativou tenha resolvido o problema subjacente. Significa que dois grupos de administradores examinaram os mesmos números publicados e chegaram a avaliações diferentes, e a experiência de um estudante com essa tecnologia agora depende em parte de qual universidade ele frequenta, e não de qualquer aspecto do trabalho que enviou.

Um autor que se pergunte se seu próprio rascunho apresenta o perfil estatístico que a objeção de viés de Vanderbilt descreve pode verificá-lo diretamente com um verificador de perplexidade gratuito em vez de esperar para descobrir qual política sua própria universidade escolheu.

As evidências por trás dessas decisões estão apresentadas separadamente: o que um falso positivo realmente é, e a taxa de falso positivo que o próprio Turnitin publica.

as ferramentas gratuitas do TextPulse cobrem esse mesmo terreno antes que qualquer parte dele chegue a um detector. O Turnitin continuará ajustando seus próprios limiares à medida que retreina o modelo; se uma determinada universidade está executando o recurso no momento é uma configuração, não um fato sobre o próprio artigo, e vale a pena verificar um rascunho em seus próprios termos, independentemente de como essa configuração esteja definida neste semestre.