GPTZero Nasıl Çalışır

Arama çubuğuna "how gptzero works" yazdığınızda, dönen sonuçların çoğu hâlâ perplexity ve burstiness, yani GPTZero'nun kurucusunun ChatGPT'nin yayımlanmasından sonraki ilk haftalarda ün kazandırdığı iki istatistik hakkında açıklamalar içerir. Bu tanım Ocak 2023'te doğruydu. Ancak o yılın sonbaharından beri doğru değildir, çünkü GPTZero'nun kendi belgelerine göre şirket bu yöntemi bütünüyle başka bir şeyle değiştirmiştir. Aracın ilk sürümde yaptığı şey ile bugün yaptığı şey arasındaki fark o kadar büyüktür ki, bugün hâlâ dolaşımda olan açıklamaların çoğu artık var olmayan bir ürünü tarif etmektedir.

Bugün GPTZero, perplexity hesabı yapmak yerine, insan tarafından üretilmiş ve AI tarafından üretilmiş metinlerden oluşan büyük ve karma bir derlem üzerinde cümle cümle çalışan bir sınıflandırıcı kullanır. Bugünkü GPTZero hâlâ tek bir ana sayı verir, ancak hesaplama farklıdır. Ana sayının altındaki cümle düzeyindeki vurgulama da 2023'te taşıdığı anlamdan farklıdır. Hikâyenin her iki sürümünü de bilmek önemlidir, terimleri ünlü kılan sürüm ve bugün gerçekten çalışan sürüm.

Tarihçe: Perplexity ve Burstiness GPTZero'yu Nasıl Ünlü Kıldı

2 Ocak 2023'te, o zamanki Princeton öğrencisi Edward Tian, ChatGPT'nin çıkışından yalnızca haftalar sonra GPTZero'nun herkese açık bir demosunu yayımladı. Onun özgün açıklama sayfası, bir dil modelinin bir şey yazıp yazmadığını saptamak için dil modellemesinden ödünç alınmış iki istatistiği nasıl kullandığını açıklar. Perplexity, bir referans modelin metindeki sözcük seçimleri karşısında ne kadar şaşırdığını gösteren bir puandır. Burstiness ise GPTZero'nun, bu şaşkınlığın bir belge boyunca ne ölçüde dalgalandığına verdiği addır. Bu açıklama sayfaları, her iki sözcüğün de AI yazımı üzerine gündelik konuşmaya girmesinin nedenidir. Bugün perplexity ya da burstiness tanımlayabilen çoğu kişi bu terimleri bir ders kitabından değil, GPTZero'dan öğrenmiştir.

Bu mekanizmanın kendisini açıklamak oldukça basitti. Bir pasajı bir referans dil modelinden geçirirsiniz ve modelin son derece öngörülebilir, düşük perplexity bulduğu düzyazı, makineye özgü olarak okunur, çünkü üretim, şaşırtıcı olan yerine muhtemel bir sonraki kelimeyi tercih etme eğilimindedir. GPTZero'nun kendi artık kullanılmayan belgeleri bile bir pratik kural yayımlamıştı, 85'in üzerindeki bir perplexity puanı, makineden çok insan tarafından yazılmış olarak okunuyordu. Bu eşik, tek bir sağlayıcıdan, tek bir modelden, tek bir zaman noktasından geliyordu ve GPTZero'nun kendisi artık bunu desteklemiyor.

GPTZero Şimdi Nasıl Çalışıyor, Cümle Düzeyinde Bir Sınıflandırıcı

GPTZero'nun destek merkezi açıkça, şirketin sonbahar 2023 itibarıyla tespit için perplexity ve burstiness kullanmayı bıraktığını, derin öğrenme mimarisine geçtikten sonra belirtiyor. Bu yazı için kontrol edilen mevcut teknoloji sayfası, geçişin tamamen yapıldığını doğruluyor, web, eğitim ve çeşitli dil modellerinden alınan metinler üzerinde eğitilmiş, uçtan uca bir derin öğrenme yaklaşımını tanımlıyor, cümle cümle çalışan ve bir olasılık ile bir güven skoru üreten bir sınıflandırma modeli kullanıyor. O sayfada perplexity ve burstiness hiçbir yerde görünmüyor.

O zamandan beri, tespitten kaçmak için bir yeniden yazma aracından geçirilmiş AI metnini yakalamak üzere tasarlanmış bir savunma katmanı, Paraphraser Shield, da ekledi. Metin yapıştırabilir, Word belgeleri, PDF'ler ve görüntü dosyaları yükleyebilir, aynı anda en fazla elli dosya gönderebilirsiniz. Tüm bu altyapının, bir referans modelin aynı kelimeyi ne sıklıkla tahmin etmiş olacağını saymakla hiçbir ilgisi yoktur.

Bir GPTZero Raporu Size Gerçekte Neyi Gösterir

Bir GPTZero sonucu üç bölüm içerir, AI, insan ya da karma sınıflandırması, belgenin AI tarafından yazılmış olma olasılığını ifade eden bir yüzde ve bu belirli tahminin ne kadar güvenilir olduğunu açıklayan bir güven etiketi. Etiket, göründüğünden daha önemlidir. GPTZero, "yüksek güven"i yüzde 2'nin altındaki bir hata oranına, "düşük güven"i ise yüzde 14 veya daha yüksek bir hata oranına bağlar, bu da aynı başlık yüzdesinin bir rapordan diğerine çok farklı bir ağırlık taşıyabileceği kadar geniş bir aralıktır.

Ücretli taramalar, cümle düzeyinde vurgulama ekler ve bunun doğru okunması gerekir. GPTZero, vurgulanan cümleleri, genel puanı orantısız biçimde etkileyen cümleler olarak tanımlar, bunları tek tek satırlara yönelik suçlamaların bir listesi olarak değil. Bir cümle vurgulanmamış olabilir ve yine de sonucu şekillendirmiş olabilir, çünkü sınıflandırıcı belgeyi cümle cümle oy vermek yerine bir bütün olarak okur.

Rapor öğesi	Size ne söylediği
Sınıflandırma	Tek bir etiket: AI, insan veya karma
AI olasılık puanı	Modelin belgenin AI tarafından yazılmış olma olasılığını nasıl değerlendirdiğini yansıtan bir yüzde
Güven etiketi	Yüksek güven düzeyinden, 2 percent hata oranının altından, düşük güven düzeyine, 14 percent veya daha yüksek seviyeye kadar değişir
Cümle vurgulama	Advanced Scan üzerinde puana en çok katkıda bulunan cümleleri işaretler, bununla bağlantılı her cümleyi değil

Bu rapor öğelerinin hiçbiri, perplexity-and-burstiness açıklayıcısı hâlâ GPTZero'nun kendisini tanımlayan kamuya açık açıklaması iken bugünkü biçimleriyle mevcut değildi. Arayüz, yöntemle birlikte değişti.

Perplexity ve Burstiness Açıklaması Neden Hâlâ Dolaşımda

GPTZero'nun özgün açıklayıcısı hâlâ çevrimiçi, hâlâ dizine eklenmiş durumda ve hâlâ perplexity ve burstiness kavram olarak nasıl işlediğine dair daha açık genel açıklamalardan biri. Arama motorları ve diğer siteler onu alıntılamayı sürdürüyor ve bazıları, aracın sınıflandırıcısının yanında sessizce bir perplexity ve burstiness katmanı çalıştırmaya devam ettiğini iddia eden, geniş biçimde paylaşılan bir 2026 incelemesine atıf yapıyor. GPTZero'nun kendi güncel sayfaları, teknoloji sayfası ve her iki destek makalesi, bunun tersini söylüyor: terimler yalnızca perde arkasında gizlenmiş değil, kaldırıldı. Bir kavramı soyut düzeyde açıklayan bir sayfa ile bu aracın güncel yöntemini açıklayan bir sayfa aynı şey değildir ve ikisini birbirinin yerine kullanılabilir görmek, bu karışıklığın sona erme tarihinden üç yıl sonra hâlâ sürmesinin başlıca nedenidir.

Bu, önemsiz bir ayrıntının ötesinde önem taşır. GPTZero'yu yenmek için özellikle perplexity değerini düşürmesi ya da cümle uzunluğunu dağıtması söylenen bir öğrenciye veya meslektaşa, 2023'te çalışmayı durduran bir ürün sürümüne yönelik tavsiye verilmektedir. Bir cümle sınıflandırıcısını etkileyen şey, buna bağlı ama farklı bir sorudur, tek başına bu iki istatistikten ziyade AI dedektörlerinin gerçekte nasıl çalıştığına ilişkin daha geniş açıklamaya daha yakındır. GPTZero bunları ölçmeyi bırakmış değildir, kendi ifadesine göre bunlar mevcut modele girdi sağlayan yedi gösterge arasında yer alır, ancak artık sonucu belirleyen şey olmaktan çıkmıştır.

GPTZero'nun Yapamayacağını Söylediği Şeyler

GPTZero'nun açıkladığı doğruluk oranları, bir sağlayıcının kendi ürünü hakkında yayımlaması muhtemel olan kadar güçlüdür: karışık belgelerde yüzde 96.5 doğruluk, şirketin yüzde 1 ile sınırladığı genel yanlış pozitif oranı ve ana dili İngilizce olmayan yazının yaygın bir vekili olan TOEFL denemelerinde özel olarak yüzde 1.1. Bu sayılar, GPTZero'nun kendi değerlendirmesinden gelmektedir ve bunları bildiren sayfada bağımsız bir yeniden üretimden söz edilmemektedir.

GPTZero'nun kendi sınırlamalar sayfası, pazarlama rakamlarından daha ayrıntılıdır. Şirket, daha fazla metin gönderildikçe doğruluğun arttığını ve tam belgeye kıyasla cümle ve paragraf düzeyinde düştüğünü belirtmektedir. Eğitim verilerinin çoğunlukla yetişkin İngilizce düzyazısından oluştuğunu, bu örüntüden sapan metinlerin güvenilir biçimde sınıflandırılmasının daha zor olduğunu belirtmektedir. Sınıflandırıcının, üretimden sonra yoğun biçimde değiştirilmiş AI metnini yakalamak üzere eğitilmediğini belirtmektedir. Ve yalnızca sohbet botu çıktısının değil, başka makine üretimi ya da son derece prosedürel yazının da aynı şekilde işaretlenebileceğini açıkça belirtmektedir.

Bunların hiçbiri, GPTZero'nun sayısını sorgulanamaz kabul etmek için bir gerekçe değildir ve bu, kendi koşulları içinde anlaşılmayı hak eden tek algılayıcı da değildir. Böyle bir sınıflandırıcının gerçekte neye tepki verdiğini merak eden okuyucular, bu örüntünün bir versiyonunu kendileri bir ücretsiz perplexity denetleyicisi ya da bir ücretsiz burstiness denetleyicisi ile görebilir, bu tür bir raporun dayandığı diğer istatistiksel katmanları kapsayan daha kapsamlı bir ücretsiz araçlar koleksiyonunun iki parçası olarak.

GPTZero'nun iki başlıca istatistiğinin kendilerine ait sayfaları vardır: perplexity'nin AI tespitinde neyi ölçtüğü ve iki sayıyı da üreten token olasılığı aritmetiği.

Kendi kör noktalarını bu kadar açık biçimde adlandırmaya istekli bir araç, hiçbir kör noktası olduğunu iddia eden bir araçtan daha fazla güveni hak eder ve bir raporda açıklanmayan bir sonraki yüzde, bunu hangi tür aracın ürettiğini sormaya başlamak için iyi bir yerdir.