AI 텍스트를 사람처럼 보이게 하는 방법, AI 탐지기 점수를 낮추는 법, 인용문을 보존하는 법, 더 나은 학술 논문 작성법에 대한 전문가용 글.
Compilatio는 미국식 개요에서 Turnitin을 전제하는 곳에서 유럽 대학이 라이선스를 부여하는 탐지기이다. 프랑스에서 개발되었고, 50개국 이상에서 1,100개가 넘는 학교가 사용하며, 학생이 제출 전에 자신의 과제에 대해 스스로 실행할 수 있는 유일한 주요 기관용 탐지기이다. 이 도구는 AI 텍스트를 잡아내는 신뢰성 비율이 94 to 99%이고 오탐은 1% 미만이라고 주장한다. 이를 포함한 유일한 동료심사 연구는 14개 도구 중 2위로 평가했으며, 시험한 도구들이 정확하지도 신뢰할 수도 없다고 결론지었다. 여기서는 근거가 무엇을 뒷받침하는지 살펴본다.
Sapling의 AI detector는 무결성 회사가 아니라 NLP 도구 회사에서 나왔으며, 이는 공개 API, 문장별 perplexity 점수, 그리고 분류 작업을 위해 만들어진 Chrome extension에서 드러납니다. 독립적 성과 범위는 우리가 검토한 것 중 가장 넓어서, Scribbr의 테스트에서 0개의 오탐부터 2025년 Texas A&M 연구에서 90%의 오탐률까지 나타났습니다. 단일 점수가 아니라 이러한 변동성이 핵심 발견입니다.
Winston AI는 탐지기 업계에서 가장 높은 자체 주장 수치인 99.98% 정확도를 광고하며, 이는 회사가 공개한 적 없는 내부 테스트 세트에서 측정된 것이다. 동료 심사를 거친 RAID 벤치마크는 전체 정확도를 고정된 5% 오탐률에서 71%로 제시했으며, 이는 테스트된 4개의 상용 탐지기 중 여전히 2위였다. 여기서는 각 수치가 실제로 무엇을 측정하는지, 그리고 이 도구가 실제로 누구에게 적합한지를 살펴본다.
Scribbr의 무료 AI checker는 무료 등급에서 가장 좋은 수치를 보인다. Scribbr이 자체적으로 공개한 비교에서 정확도 78%로 공동 1위이며, 프리미엄 등급은 84%이다. 그러나 핵심은 "자체"라는 점이다. 이 테스트는 공급자가 설계하고, 실행하고, 채점했으며, 다른 상위 무료 도구는 같은 모회사의 제품이다. 여기서는 그 수치가 무엇에 근거하는지, 프리미엄 등급이 무엇을 추가하는지, 그리고 Scribbr 사전 점검이 Turnitin 결과를 예측할 수 없는 이유를 살핀다.
Copyleaks는 학생이 선택하지 않아도 접하게 되는 AI 탐지기로, Canvas, Moodle, Blackboard 안의 표절 검사와 함께 묶여 있다. 이 업체는 99%가 넘는 정확도와 .03%의 오탐률을 광고한다. 2026년 6월 Vrije Universiteit Brussel 연구에서는 완전히 AI가 생성한 논문 40편 중 단 한 편도 완전히 표시하지 못했다. 여기서 실제 증거가 무엇을 보여 주는지 살펴본다.
Pangram은 약 1만 분의 1의 오탐률을 공표하며, 대부분의 detector 공급업체와 달리 최근의 독립 연구가 같은 방향을 가리킨다. Vrije Universiteit Brussel의 동료 심사 2026년 연구는 석사 수준 논문에서 만족스러운 결과를 낸 네 개 도구 중 유일한 도구라고 밝혔다. 여기서는 연구들이 무엇을 측정했는지, 근거가 아직 얼마나 빈약한지, 그리고 어떤 detector 점수도 무엇을 증명할 수 없는지를 살펴본다.
사용자 언어로 번역되지 않은 게시물은 영어 블로그에 있습니다.