Scribbr AI Detector 리뷰: 78% 점수가 실제로 의미하는 것

Scribbr의 AI 탐지기는 무료 등급에서 가장 좋은 헤드라인 수치를 보인다, 무료 검사기의 정확도는 78 percent이고 프리미엄 버전은 84 percent이다. 두 수치 모두 실제이며, 공개되어 있고, 현재도 유효하다. 두 수치 모두 Scribbr가 직접 설계하고, 실행하고, 채점한 시험에서 나온 것이기도 하며, 이 한 가지 사실은 사용자가 장을 상자에 붙여 넣기 전에 그것들을 얼마나 신뢰할지에 영향을 주어야 한다.

Scribbr는 임의의 탐지기 스타트업이 아니다. 2012년에 논문 편집 서비스로 시작했으며, 인용 생성기와 APA 가이드는 AI 탐지가 존재하기 훨씬 전부터 학생들에게 익숙한 이름이 되게 했다. 바로 그 평판 때문에 Scribbr의 AI 검사기는 학생들이 가장 먼저 시도하는 도구인 경우가 많고, 그 점수는 알려지지 않은 사이트의 수치보다 더 자동적인 신뢰를 얻는다. 유용한 질문은 "Scribbr가 좋은가"보다 더 좁다, 그 78 percent는 실제로 무엇에 근거하는가, 그리고 Scribbr 사전 검사는 나중에 Turnitin이 교수에게 보여줄 결과를 예측하는가? 답은 각각 "소규모 자체 운영 벤치마크"와 "아니다"이며, 둘 다 자세히 이해할 가치가 있다.

Scribbr AI 탐지기는 무엇이며, 실제로 누가 사용하는가

무료 Scribbr AI 탐지기는 계정 없이 브라우저에서 실행된다. Scribbr의 제품 페이지는 제출당 최대 1,200 words까지 무제한 검사를 제공한다고 광고하며, English, Spanish, German, French를 지원하고, 인간이 쓴 글, AI로 다듬은 글, AI가 생성한 글로 구분하는 3분류 체계를 제공하며, 문단 수준의 피드백도 제공한다고 밝힌다. 그러나 Scribbr의 자체 비교 글은 무료 한도를 검사당 500 words로 적고 있어, 현재 회사의 페이지들 사이에는 서로 일치하지 않는 부분이 몇 군데 있다.

제품 FAQ는 무료 등급의 한계를 이례적으로 솔직하게 밝힌다. 그 문서는 무료 탐지기가 GPT-2, GPT-3, GPT-3.5로 작성된 텍스트를 "평균적인 정확도"로 잡아낸다고 명시하며, GPT-4를 포함한 높은 정확도의 탐지는 프리미엄 버전에만 제공된다고 말한다. 이러한 구분은 중요하다, 2026년에 누구나 검사할 가능성이 가장 높은 텍스트의 대부분은 GPT-3.5보다 새로운 모델에서 나오기 때문이다. 무료 도구의 주요 사용자는 에세이에 대해 제출 전 검사를 하는 학생들이다.

Scribbr의 주장, 78 Percent 무료, 84 Percent 프리미엄

78 percent라는 수치는 Scribbr가 2026년 4월에 발표하고 2026년 7월에 수정한 12개 AI 탐지기 비교에서 나온 것이다. Scribbr는 방법론을 상세히 공개했다는 점에서 평가할 만하다. 6개 범주에 걸친 30개의 시험 텍스트를 사용했고, 완전한 인간 작성, GPT-3.5, GPT-4, 인간과 AI의 혼합, 그리고 두 개의 패러프레이즈 세트를 포함했으며, 각 텍스트는 1,000 to 1,500 characters였고, 거의 맞힌 경우에는 부분 점수를 부여했다. 그 시험에서 Scribbr의 프리미엄 탐지기는 84 percent로 전체에서 가장 높은 성과를 보였고, Scribbr의 무료 탐지기는 QuillBot의 무료 탐지기와 함께 78 percent로 동률이었으며, 세 도구 모두에서 거짓 양성은 0건으로 기록되었다.

같은 글에는 인용하기에는 덜 적합한 세부 문구도 있다. 가장 성과가 좋았던 프리미엄 도구조차 인간이 쓴 글과 섞였거나 패러프레이징 도구를 거친 AI 텍스트를 60 percent만 찾아냈는데, 실제 제출물에 가장 자주 포함되는 유형이 바로 이런 텍스트다. 또한 Scribbr의 제품 페이지 FAQ는 자체 비교 결과를 아직 따라잡지 못했다. 거기에는 여전히 "우리가 확인한 가장 높은 정확도는 프리미엄 도구에서 84% 또는 최고의 무료 도구에서 68%였다"라고 적혀 있으며, "시중의 어떤 AI 모델도, 우리를 포함해, 100% 정확도를 보장할 수 없다"는 인정도 함께 있다.

자체 수행 시험의 문제

위의 모든 내용은 공급업체 벤치마크다. Scribbr가 텍스트를 선택하고, 채점 구간을 정의하고, 스캔을 실행하고, 자사 제품을 평가한 뒤, 자사 제품이 1위를 차지한 순위를 발표한 것이다. 이것이 수치를 거짓으로 만들지는 않으며, 공개된 방법은 업계 다수보다 더 투명하다. 그러나 이것은 자체 수행 시험이라는 뜻이며, 따라서 회사의 내부 수치를 읽는 방식으로 읽어야 한다. 즉, 다른 사람이 검증한 결과가 아니라 검증이 필요한 주장으로 보아야 한다.

두 가지 세부 사항이 이 주의사항을 더 분명하게 한다. 첫째, 표본이 작다. 총 30개 텍스트이며, 그중 완전히 인간이 작성한 것은 5개뿐이므로, 무오탐지율 주장은 5개 문서에 근거한다. 둘째, Scribbr의 순위에서 상위권에 함께 오른 두 개의 무료 도구는 같은 기업 계열에 속한다. Scribbr의 소개 페이지는 이 회사가 LanguageTool과 함께 "QuillBot의 일부이며, 더 넓은 Learneo 기업군에 속한다"고 밝히고 있으며, 이 탐지기의 자체 제품 페이지는 추가 옵션으로 QuillBot의 AI checker를 권장한다. 무료 등급의 "공동 1위"는 한 기업 계열 내부에서, 그 계열이 공개한 시험에서 발생했다.

독립적인 증거는 빈약하다. 이는 주로 동료 심사를 거친 벤치마크에 Scribbr가 거의 포함되지 않기 때문이다. 이 범주에서 가장 많이 인용되는 학술 시험은, Turnitin을 포함한 14개 탐지 시스템을 다룬 Weber-Wulff와 동료들의 2023년 다기관 연구인데, 이 연구는 시험된 도구들이 "정확하지도 신뢰할 수도 없다"고 결론지었고, 텍스트를 인간이 작성한 것으로 분류하는 방향의 체계적 편향을 보였으며, 텍스트가 편집되거나 바꿔 말해지는 즉시 정확도가 크게 떨어졌다. Scribbr는 시험된 도구에 포함되지 않았으므로, 이는 양면적이다. 한편으로는 그 연구의 낙제 판정을 피했지만, 다른 한편으로는 Scribbr의 탐지기에 관한 가장 강력한 공개 수치가 여전히 Scribbr가 자기 자신에 대해 산출한 수치라는 뜻이기도 하다. 이것은 이 전체 제품 범주를 관통하는, 공급업체의 주장과 독립적 증거 사이의 같은 간극이다.

오탐지, 그리고 누가 피해를 입는가

Scribbr의 자체 테스트에서, 무료 도구와 프리미엄 도구 모두에서 다섯 개의 인간이 작성한 텍스트는 하나도 표시되지 않았다. 다섯 개의 텍스트만으로는 위양성률을 입증할 수 없으며, 많아야 그 결과는 낮은 위양성률과 일치한다고 볼 수 있다. Weber-Wulff 연구의, 탐지기가 텍스트를 인간이 작성한 것으로 판단하는 경향이 있다는 발견은, 이 범주가 사람을 잘못 비난하기보다 AI를 놓치는 쪽에서 더 자주 오류를 범한다는 뜻이지만, 잘못된 비난은 누군가의 심리를 초래하는 오류이며, 그 영향은 고르게 분포하지 않는다. 공식적인 학술 문체와 제2언어로 글을 쓰는 저자의 텍스트는 탐지기 전반에서 표시를 받는 비율이 불균형하게 높으며, 이 패턴은 AI 탐지기가 비원어민 화자에게 편향되는 이유에 관한 페이지에서 자세히 다룬다. 0퍼센트로 나오는 Scribbr 사전 점검 결과는 증거가 아니라 안심에 가깝다. 그것은 귀하의 기관이 사용하지 않는 도구에서 나온, 한 공급업체의 추정치일 뿐이며, 다른 분류기가 무엇을 말할지에 대해서는 아무것도 입증하지 못한다.

가격과 접근의 현실

무료 검사기는 정말로 무료이다. 광고 지원 방식이며, 가입이 필요 없고, 실행 횟수에 제한이 없다. 프리미엄 AI 탐지기는 단독으로 판매되지 않는다. Scribbr의 비교 기사에 따르면, 이는 프리미엄 표절 검사에 추가되는 부가 기능이며, 그 가격은 문서 크기에 따라 $19.95에서 $39.95 사이이고, 업로드 분량에는 단어 수 제한이 없다.

묶음 판매는 알아둘 만한 구분을 가린다. 두 제품은 별개의 시스템이다. Scribbr의 FAQ는 표절 측면이 "대부분의 대학과 출판사가 사용하는 소프트웨어와 유사한 기술"을 사용한다고 밝히는 반면, "추가 AI 탐지기는 Scribbr의 독자 소프트웨어로 구동된다"고 설명한다. 같은 보고서에 나타나는 유사도 점수와 AI 점수는 서로 관련 없는 기계에서 나온 것이며, 하나에 대한 신뢰는 다른 하나에 대해 아무것도 말해주지 않는다.

왜 귀하의 Scribbr 점수는 Turnitin의 점수와 일치하지 않을 것인가

학생들이 이 도구를 사용하는 가장 흔한 방식은 Turnitin 예행연습으로서의 사용이며, 이는 이 도구가 가장 덜 지원하는 용도이다. 모든 AI 탐지기는 서로 다른 팀이, 서로 다른 말뭉치로, 서로 다른 결정 임계값과 서로 다른 오탐 허용도를 가지고 훈련한 분류기이다. 보정 차이는 같은 에세이가 한 도구에서는 2 percent, 다른 도구에서는 60 percent를 받을 수 있음을 의미하며, 어느 도구도 오작동하지 않는다. Weber-Wulff 연구는 바로 이러한 종류의 시스템 간 불일치를 문서화했다. Turnitin의 모델은 다르게 작동하며 기관에만 보이는데, Scribbr 팀이 그 내부 우선순위를 알 수 없는 상태에서 조정되었고, 그 오류는 고유한 패턴을 따르며, 이는 Turnitin false positive rate에 대한 우리의 분석에서 별도로 다루었다. 마감 전날 밤의 낮은 Scribbr 점수는 Scribbr에 대한 하나의 데이터 포인트일 뿐이며, Turnitin에 대한 예측이 아니다.

판정, 그리고 전체 비교

Scribbr의 무료 AI checker는 무료 등급에서 더 잘 문서화된 도구들 가운데 하나이며, 실제 학문적 실적을 가진 회사의 제품이고, 공개된 방법론은 대부분의 경쟁 제품이 제공하는 것보다 더 개방적이다. 그러나 표제상의 정확도는 여전히 30개 텍스트 내부 테스트에서의 자체 평가 점수이며, 그 테스트에서는 회사의 자매 제품이 다른 최상위 자리를 차지했다. 또한 무료 등급은 공급업체 자신의 설명에 따르면 현재 모델에 대해 명시적으로 더 약하며, 실제로 여러분의 작업을 판정할 기관용 도구와 대조하여 보정할 수 없다. 이를 초안에 대한 대략적인 초기 신호로 사용하고, 어떤 탐지기에서든 단일 퍼센트는 판정이 아니라 추정치로 취급하라. Scribbr의 수치가 GPTZero, ZeroGPT, Copyleaks, 그리고 나머지 도구들과 하나의 일관된 관점 아래에서 어떻게 비교되는지 보려면, 우리의 전체 AI detectors 비교부터 시작하라.