Turnitin 점수는 어느 정도가 좋은가?

한 학생은 지도교수로부터 15퍼센트 미만이면 괜찮다는 말을 듣는다. 같은 학과의 또 다른 학생은, 자신의 논문이 복도에서 12퍼센트로 표시되었는데, 그중 3퍼센트가 인용 부호 없이 하나의 끊기지 않은 문단 안에 들어 있기 때문이다. 두 학생 모두 Turnitin의 유사도 점수를 올바르게 읽고 있다. 이 도구는 애초에 단일한 합격 또는 불합격 수치를 제시하도록 만들어진 것이 아니다.

그렇다면 좋은 Turnitin 점수란 무엇인가? 그런 수치는 없다. Turnitin은 허용 가능한 퍼센트를 공표하지 않으며, 제출물을 채점하지도 않고, 이 수치가 그 자체로 표절의 척도가 아니라고 분명히 말한다. 각 기관은 자체 지침을 정하고, 그 안의 각 지도교수도 종종 따로 정하기 때문에, 같은 보고서도 한 사무실에서는 별일 아닌 것처럼 보이고 다음 사무실에서는 우려스럽게 보일 수 있다. 배워야 할 가치는 그 수치 뒤에 무엇이 있는지 읽는 방법이다.

좋은 Turnitin 점수란 무엇인가?

Turnitin은 좋은, 안전한, 또는 허용 가능한 수치가 무엇인지 한 번도 공표한 적이 없으며, 그 이유는 분명하다. 유사도 점수는 제출물 안의 텍스트가 Turnitin의 데이터베이스에 이미 들어 있는 텍스트와 얼마나 일치하는지를 측정할 뿐, 그 중복이 부적절하게 사용되었는지는 측정하지 않기 때문이다. 높은 점수는 전적으로 올바르게 인용되고 출처가 제시된 자료에서 나올 수도 있다. 낮은 점수는 한 출처를 매우 가깝게 바꾸어 서술한 논문보다도 높을 수 있으며, 그 경우에도 일치 탐지 엔진은 전혀 작동하지 않을 수 있다. 이 수치를 성적처럼 읽는 것은 도구를 거꾸로 이해하는 것이다.

10퍼센트에서 20퍼센트 정도의 수치는 비공식적인 경험칙으로 널리 유통되며, 포럼과 학습 안내서 전반에서 반복되다가 마치 공식 기준처럼 들리기 시작한다. 그러나 그것은 공식 기준이 아니다. Turnitin은 그런 수치를 정하지 않으며, 문서 길이, 인용 밀도, 분야 관행을 무시하는 경험칙은 실제 논문과 마주하는 순간 무너진다. 적절히 인용된 출처 30개로 구성된 문헌 검토는 인용문만으로도 20퍼센트를 넘길 수 있다. 반면 따옴표 없이 매우 가깝게 바꿔 쓴 단락 하나는 5퍼센트 미만일 수 있지만, 오히려 더 심각한 문제일 수 있다.

유사도 점수가 실제로 측정하는 것

Turnitin은 자체 도구를 거의 정확히 그런 방식으로 설명한다. Boise State University의 안내는 Turnitin의 표현을 바탕으로, 유사도 점수가 논문의 내용 중 이미 Turnitin의 데이터베이스에 있는 자료와 일치하는 비율이며, 그 비율 자체가 논문에 표절된 자료가 포함되어 있는지에 대한 평가는 아니라고 설명한다. 이 구분은 실제로 중요한 역할을 한다. 일치는 기계적인 것으로, 한 문자열의 단어들이 다른 어딘가의 문자열과 맞아떨어지는 것일 뿐이며, 그 중복이 적절히 출처 표시되었는지 판단하는 일은 알고리즘이 아니라 사람이 해야 한다.

일치를 찾는 데 쓰이는 데이터베이스는 의도적으로 광범위하다. 현재 및 과거의 학생 제출물, 공개 웹, 그리고 방대한 학술 출판물이 포함된다. 그 어떤 내용도 의미를 읽기 위해 검토되지 않는다. 시스템은 겹치는 단어 문자열을 찾아 그것이 제출물의 어느 정도를 차지하는지 보고하며, 이것이 인용된 문장과 조용히 복사된 문장이 동일한 일치를 만들어낼 수 있는 이유다. 보고서의 상세 보기에서만 무엇이 무엇인지 확인할 수 있다.

높은 점수가 전적으로 정당할 수 있는 이유

학술 글쓰기의 두 가지 흔한 특징이 대부분을 설명한다. 인용된 구절은 의도적으로 단어를 복사하고 페이지에서 타인의 말로 표시하기 때문에, 설계상 일치한다. 참고문헌 목록도 마찬가지로 안정적으로 일치하는데, 저자명, 학술지명, 인용 형식이 같은 출처를 인용하는 수천 편의 다른 논문에서 반복되기 때문이다. 둘 다 올바른 학술 글쓰기가 보여야 하는 모습이다.

나란히 놓고 보면, 부풀려진 점수와 실제 문제는 겉보기에 다르게 보인다.

일치한 항목	그렇게 된 이유	더 자세히 살펴볼 가치가 있는가?
따옴표와 인용이 있는 인용문	해당 문구는 의도적으로 그대로 옮겨졌고 페이지에 출처가 표시되었다	아니오, 이것이 올바른 인용의 모습이다
참고문헌 목록 또는 서지	저자명, 학술지 제목, 인용 형식은 다른 많은 논문에서도 반복된다	아니오, 제외 설정이 적용되지 않은 경우는 예외이다
표준적인 방법 또는 절차적 표현	한 분야의 공유 어휘는 여러 논문에서 같은 과정을 같은 방식으로 설명한다	드물다, 다만 해당 절 전체가 새로 작성된 것이 아니라 그대로 옮겨진 경우는 예외이다
따옴표 없이 하나의 출처와 일치하는 길고 끊기지 않은 단락	문구가 다른 저자의 문장을 충분히 가깝게 따라가서 일치 탐지 엔진이 포착한다	예, 이것은 출처를 열어 확인해 볼 가치가 있는 패턴이다

낮은 점수도 여전히 문제를 숨길 수 있는 이유

낮은 수치는 보이는 것보다 더 좁은 질문에 답한다. 즉, 적은 양의 텍스트가 Turnitin의 데이터베이스와 한 단어 한 단어까지 일치하는지 여부만을 묻는다. 다른 저자의 구조와 논지를 그대로 유지하면서 표현만 충분히 바꾸는 바꿔쓰기 문장은 0에 가까운 점수를 받을 수 있지만 여전히 심각한 학문적 진실성 문제일 수 있다. 이 엔진은 빌려온 생각이 아니라 단어의 문자열을 기준으로 작동하기 때문이다. 번역된 내용이나 Turnitin의 색인 데이터베이스 밖의 자료도 마찬가지로 작동한다. 일치할 것이 없으면, 표시될 것도 없다.

조작된 출처는 다른 방향에서 동일한 사각지대를 만들어낸다. 존재하지 않는 참고문헌은 어떤 것과도 일치할 수 없는데, 어디에도 그것이 일치할 대상이 없기 때문이다. 또한 유사도 점수는 애초에 실제로 존재하지 않았던 인용을 표시할 방법이 없다. TextPulse의 무료 AI 인용 검사기는 바로 그 공백을 위해 존재한다. 이는 독자가 그 공백을 어렵게 찾아내기 전에, 참고문헌 목록의 각 항목을 해당 출처가 실제로 등재되어 있어야 할 등록 정보와 대조한다.

수치 자체를 지나가기 전에 하나 더 구분해 둘 만한 점이 있다. 낮은 유사도 점수를 가진 제출물도 Turnitin의 별도 AI 작성 지표를 포함할 수 있는데, 이는 다른 종류의 문제를 포착하도록 설계된 다른 측정치이며, 이 사이트의 Turnitin이 실제로 ChatGPT를 감지할 수 있는지에 대한 안내에서 다룬다. 이 두 퍼센트는 같은 방식으로 계산되지 않으며, 이 글은 유사도 점수만을 다룬다.

수치를 읽는 대신 보고서를 읽는 방법

전체 수치를 보기 전에 일치 항목의 세부 내역에 먼저 반응하지 말아야 한다. Turnitin은 점수를 구성하는 사람 출처들을 그 기여도 순으로 배열한다. 열한 개의 출처가 각각 2퍼센트씩 기여하여 합계 22퍼센트를 이루는 경우는, 하나의 출처가 전체를 이루는 경우와는 다르게 읽힌다. 첫 번째 양상은 흔한 표현이 여러 곳에서 겹친 결과를 대체로 반영한다. 두 번째는 그 출처가 실제로 무엇을 말하는지 직접 살펴볼 가치가 있다.

Turnitin은 같은 퍼센트 값을 색상 구간으로도 분류하는데, 이는 Loughborough College의 학생 안내에도 그대로 제시되어 있다. 파란색은 일치하는 텍스트가 없음을 뜻하고, 초록색은 1단어부터 24퍼센트까지, 노란색은 25퍼센트부터 49퍼센트까지, 주황색은 50퍼센트부터 74퍼센트까지, 빨간색은 75퍼센트 이상을 뜻한다. 대학의 안내는 색상이 의미하지 않는 바에 대해서도 분명하다. 유사도 검사는 제출물에 표절된 자료가 포함되어 있음을 뜻하지 않는다. 색상은 보고서에 주의를 끌기 위한 분류일 뿐, 판정이 아니다.

기관 자체 설정에서 인용문과 참고문헌을 집계에서 제외하는지 여부도 확인할 가치가 있습니다. 같은 제출물이라도 그 토글이 어떻게 설정되어 있는지에 따라 서로 다른 두 숫자가 나올 수 있기 때문입니다. 이것은 보이는 순간 더 이상 복잡하지 않습니다. 아무도 보고서의 첫 페이지를 넘겨 보지 않으면, 그때만 보이지 않을 뿐입니다.

점수가 예상 밖일 때 해야 할 일

합산된 총계에 반응하기보다, 표시된 각 출처를 개별적으로 다시 여십시오. 채점되는 버전에서 인용문과 참고문헌이 제외되어 있는지 확인하십시오. 학생이 초안 작성 중에 보는 숫자와 교수가 제출 시점에 보는 숫자가 항상 같은 방식으로 설정되는 것은 아니기 때문입니다. 실제로 출처 표시가 없는 일치가 발견되면, 문장을 바꾸어 일치 엔진을 피하려 하지 말고 인용을 직접 수정하십시오. 그렇게 하면 증상만 다루고 문제는 그대로 남습니다.

숫자가 여전히 지도교수가 예상하는 것과 맞지 않는다고 느껴진다면, 그 학과의 자체 관례가 무엇인지 직접 물어보십시오. 위의 섹션들은 이미 하나의 정해진 기준선이 없음을 보여 줍니다. 따라서 답은 누구나 미리 찾아볼 수 있었던 비율이 아니라, 과제에 대해 지역적 권한을 가진 사람에게 있습니다. TextPulse의 free tools collection은 보고서가 다른 사람의 받은편지함에 도달하기 전에 실행해 볼 만한 인용과 초안 점검을 다룹니다.

서로 다른 도구의 점수는 서로 대체 가능하지 않으며, how GPTZero works는 그 아래에 놓인 perplexity 통계와 함께 별도의 페이지에 설명되어 있습니다.

점수가 그렇게 작동하는 것은 그 아래에서 이루어지는 일치 과정 때문이며, 같은 보고서에서 그 옆에 놓인 더 새로운 숫자는 다른 메커니즘으로 작동합니다. 이 사이트의 AI detectors가 실제로 어떻게 작동하는지에 대한 안내가 이를 전체적으로 설명합니다. 어느 숫자든 판정으로 읽는 것은 보고서에서 읽을 가치가 있는 유일한 부분을 건너뛰는 것입니다.