AI Detection

Cara Kerja GPTZero

GPTZero membuat perplexity dan burstiness terkenal, lalu diam-diam menghentikan keduanya. Berikut apa yang kini diukur pengklasifikasinya, apa yang sebenarnya ditampilkan laporan, dan di mana alat ini menyatakan keterbatasannya sendiri.

Diperbarui pada 5 min
Diagram showing how GPTZero works today: a sentence-level AI classifier replacing its original perplexity and burstiness method

Ketikkan "how gptzero works" ke dalam bilah pencarian, dan sebagian besar yang muncul masih menggambarkan perplexity dan burstiness, dua statistik yang pendiri GPTZero sendiri buat terkenal pada minggu-minggu awal setelah rilis ChatGPT. Deskripsi itu akurat pada Januari 2023. Sejak musim gugur tahun itu, deskripsi tersebut tidak lagi akurat, ketika dokumentasi internal GPTZero menyatakan bahwa perusahaan mengganti metode itu dengan sesuatu yang sama sekali berbeda. Kesenjangan antara apa yang dilakukan alat tersebut saat peluncuran dan apa yang dilakukannya sekarang cukup lebar sehingga sebagian besar penjelasan yang masih beredar saat ini menggambarkan produk yang kini tidak lagi ada.

Hari ini, GPTZero menjalankan pengklasifikasi per kalimat pada korpus campuran yang besar, berisi teks yang dihasilkan manusia dan teks yang dihasilkan AI, bukan perhitungan perplexity. GPTZero saat ini masih memberikan satu angka utama, tetapi aritmetikanya berbeda. Penyorotan tingkat kalimat di bawah angka utama juga memiliki makna yang berbeda dibandingkan pada tahun 2023. Kedua versi cerita ini layak diketahui, yang membuat istilah-istilah tersebut terkenal, dan yang benar-benar berjalan hari ini.

Layar hasil GPTZero sangat yakin suatu bagian adalah buatan AI: probabilitas AI 100% dengan penyorotan per kalimat dan tab kosakata AI
GPTZero pada paragraf yang ditulis AI: putusan tingkat dokumen, penyorotan per kalimat pada kalimat-kalimat yang mendorong putusan tersebut, dan daftar AI-vocab. Tulisan tersebut menguraikan ketiga lapisan.

Sejarah: Bagaimana Perplexity dan Burstiness Membuat GPTZero Terkenal

Pada 2 Januari 2023, mantan mahasiswa Princeton Edward Tian merilis demo publik GPTZero, hanya beberapa minggu setelah ChatGPT dirilis. Halaman penjelasan aslinya menguraikan bagaimana ia menggunakan dua statistik yang dipinjam dari pemodelan bahasa untuk mendeteksi kapan sebuah model bahasa telah menulis sesuatu. Perplexity adalah skor tentang seberapa terkejut model referensi terhadap pilihan kata dalam teks. Burstiness adalah nama GPTZero untuk seberapa besar kejutan itu berfluktuasi di sepanjang sebuah dokumen. Halaman penjelasan tersebut adalah alasan kedua kata itu sama sekali masuk ke percakapan sehari-hari tentang penulisan berbasis AI. Kebanyakan orang yang saat ini dapat mendefinisikan perplexity atau burstiness mempelajari istilah-istilah itu dari GPTZero, bukan dari buku teks.

Mekanismenya sendiri mudah dijelaskan. Masukkan sebuah bagian teks ke dalam model bahasa referensi, dan prosa yang model tersebut anggap sangat dapat diprediksi, perplexity rendah, terbaca sebagai khas mesin, karena proses pembuatan cenderung memilih kata berikut yang paling mungkin dibanding kata yang mengejutkan. Dokumentasi GPTZero sendiri yang sudah tidak aktif bahkan memublikasikan pedoman praktis: skor perplexity di atas 85 dibaca sebagai lebih mungkin manusia daripada mesin. Ambang batas itu berasal dari satu vendor, pada satu model, pada satu waktu tertentu, dan GPTZero sendiri tidak lagi mendukungnya.

Bagaimana GPTZero Bekerja Sekarang: Pengklasifikasi Tingkat Kalimat

Pusat dukungan GPTZero menyatakannya secara gamblang: "Per 2023 musim gugur, GPTZero tidak lagi menggunakan perplexity dan burstiness untuk deteksi AI karena kami bermigrasi ke arsitektur berbasis deep-learning." Halaman teknologi saat ini miliknya, mengonfirmasi bahwa peralihannya sepenuhnya. Halaman itu menjelaskan "pendekatan deep learning end-to-end, dilatih pada kumpulan data teks dari web, pendidikan, dan AI yang dihasilkan dari berbagai LLM", di mana "model klasifikasi per kalimat menentukan probabilitas dan tingkat keyakinan bahwa sebuah teks dibuat oleh AI". Perplexity dan burstiness sama sekali tidak muncul di halaman tersebut.

Sejak saat itu, lapisan pertahanan tambahan juga ditambahkan, Paraphraser Shield, yang dibangun untuk menangkap teks AI yang telah dijalankan melalui alat penulisan ulang untuk menghindari deteksi. Anda dapat menempelkan teks, mengunggah dokumen Word, PDF, dan berkas gambar, serta hingga lima puluh berkas sekaligus. Tidak ada infrastruktur tersebut yang berkaitan dengan menghitung seberapa sering sebuah model referensi akan menebak kata yang sama.

Apa yang Sebenarnya Ditunjukkan Laporan GPTZero

Hasil GPTZero memuat tiga bagian, klasifikasi AI, manusia, atau campuran, persentase yang menyatakan probabilitas model bahwa dokumen tersebut ditulis oleh AI, dan label kepercayaan yang menjelaskan seberapa andal prediksi tertentu itu. Label tersebut lebih penting daripada yang mungkin terlihat. GPTZero mengaitkan "sangat yakin" dengan tingkat kesalahan di bawah 2 persen dan "kepercayaan rendah" dengan tingkat kesalahan 14 persen atau lebih, rentang yang cukup lebar sehingga persentase judul yang sama dapat memiliki bobot yang sangat berbeda dari satu laporan ke laporan berikutnya.

Pindai berbayar menambahkan penyorotan tingkat kalimat, dan ada baiknya membacanya dengan benar. GPTZero mendeskripsikan kalimat yang disorot sebagai kalimat yang secara tidak proporsional memengaruhi skor keseluruhan, bukan daftar tuduhan terhadap baris-baris individual. Sebuah kalimat bisa tidak disorot dan tetap membentuk hasil, karena pengklasifikasi membaca dokumen secara keseluruhan, bukan melakukan pemungutan suara kalimat per kalimat.

Unsur laporanApa yang diberikannya kepada Anda
KlasifikasiSatu label: AI, manusia, atau campuran
Skor probabilitas AIPersentase yang mencerminkan seberapa besar model menilai dokumen tersebut sebagai ditulis oleh AI
Label kepercayaanBerkisar dari sangat yakin, dengan tingkat kesalahan di bawah 2 persen, hingga kepercayaan rendah, 14 persen atau lebih
Penyorotan kalimatMenandai kalimat yang paling berkontribusi pada skor di Advanced Scan, bukan setiap kalimat yang terkait dengannya

Tidak ada unsur laporan ini dalam bentuknya saat ini ketika penjelasan tentang perplexity dan burstiness masih menjadi deskripsi publik GPTZero tentang dirinya. Antarmuka berubah seiring dengan metode tersebut.

Humanisasi makalah Anda sendiri

Ubah teks berbantuan AI Anda dan buat terdengar manusiawi, tanpa menyentuh kata penting atau sitasi.

Mulai gratis

Mengapa Deskripsi Perplexity dan Burstiness Masih Beredar

Penjelasan awal GPTZero masih tersedia secara daring, masih terindeks, dan masih menjadi salah satu deskripsi umum yang lebih jelas tentang cara perplexity dan burstiness bekerja sebagai konsep. Mesin pencari dan situs lain terus mengutipnya, dan sebagian mengarah pada ulasan 2026 yang banyak dibagikan, yang mengklaim bahwa alat tersebut masih menjalankan lapisan perplexity dan burstiness secara diam-diam, berdampingan dengan pengklasifikasinya. Halaman-halaman GPTZero sendiri yang terkini, halaman teknologi, dan kedua artikel dukungannya, mengatakan sebaliknya: istilah-istilah tersebut sudah dihentikan, bukan sekadar disembunyikan di balik layar. Halaman yang menjelaskan sebuah konsep secara abstrak tidak sama dengan halaman yang menjelaskan metode alat ini pada masa kini, dan memperlakukan keduanya sebagai saling dipertukarkan adalah alasan utama mengapa kebingungan tersebut bertahan selama tiga tahun setelah tanggal kedaluwarsanya.

Hal ini penting di luar hal-hal sepele. Seorang mahasiswa atau rekan yang disarankan untuk menurunkan perplexity atau merenggangkan panjang kalimat secara khusus agar mengalahkan GPTZero sedang diberi nasihat yang ditujukan pada versi produk yang berhenti menjalankan proses tersebut pada tahun 2023. Apa yang menggerakkan sebuah pengklasifikasi kalimat adalah pertanyaan yang terkait tetapi berbeda, lebih dekat pada penjelasan yang lebih luas tentang bagaimana AI detectors benar-benar bekerja daripada pada salah satu statistik itu sendiri. GPTZero belum berhenti mengukurnya, menurut penjelasan mereka sendiri, indikator-indikator tersebut berada di antara tujuh indikator yang memberi masukan pada model saat ini, tetapi indikator-indikator itu tidak lagi menjadi hal yang menentukan jawaban.

Apa yang GPTZero Katakan Tidak Dapat Dilakukannya

Benchmark yang dipublikasikan oleh GPTZero, kira-kira sekuat yang mungkin dipublikasikan oleh sebuah vendor tentang produk miliknya sendiri. Perusahaan melaporkan "tingkat akurasi 99% saat mendeteksi teks yang dihasilkan AI dibandingkan tulisan manusia", mengatakan "kami menjaga tingkat false positive GPTZero tidak lebih dari 1% saat mengevaluasi AI dibandingkan teks manusia", dan mencatat "tingkat akurasi 96,5%" pada unggahan yang mencampurkan tulisan AI dan manusia, bersama 1,1 persen pada esai TOEFL, sebuah pengganti yang umum untuk penulisan bahasa Inggris non-native. Angka-angka tersebut berasal dari evaluasi internal GPTZero, dipublikasikan pada Januari 2025, tanpa replikasi independen yang dirujuk pada halaman yang melaporkan angka-angka tersebut. Halaman yang sama juga menolak klaim yang paling sering digunakan oleh kebanyakan vendor, dengan menyatakan bahwa "tidak akan pernah ada jaminan 100%" dan bahwa siapa pun yang mengklaim sebaliknya kemungkinan memiliki kekeliruan pada data mereka atau metode evaluasi mereka.

Halaman keterbatasan milik GPTZero lebih spesifik dibandingkan angka-angka pemasaran. Perusahaan menyatakan bahwa akurasi meningkat seiring lebih banyak teks yang dikirimkan dan menurun pada tingkat kalimat dan paragraf dibandingkan dengan dokumen lengkap. Perusahaan menyatakan bahwa data pelatihannya sebagian besar berupa prosa bahasa Inggris dewasa, sehingga teks yang menyimpang dari pola tersebut lebih sulit untuk diklasifikasikan secara andal. Perusahaan menyatakan bahwa pengklasifikasi tidak dilatih untuk menangkap teks AI yang telah dimodifikasi secara berat setelah dihasilkan. Dan perusahaan menyatakan secara gamblang bahwa tulisan lain yang dihasilkan mesin atau yang sangat prosedural, tidak hanya keluaran chatbot, dapat ditandai dengan cara yang sama.

Semua itu bukan alasan untuk menganggap angka GPTZero tidak dapat dipertanyakan, dan itu juga bukan satu-satunya detektor yang layak dipahami dengan caranya sendiri. Pembaca yang ingin tahu apa yang sebenarnya ditanggapi oleh sebuah pengklasifikasi seperti ini dapat melihat versi pola tersebut sendiri dengan perplexity checker gratis atau burstiness checker gratis, dua bagian dari koleksi free tools yang lebih lengkap yang mencakup lapisan statistik lainnya yang menjadi dasar laporan seperti ini.

Dua statistik utama GPTZero memiliki halaman masing-masing: apa yang diukur oleh perplexity dalam deteksi AI, dan aritmetika probabilitas token yang menghasilkan kedua angka tersebut.

Alat yang bersedia menyebutkan titik butanya dengan ketepatan seperti ini layak mendapatkan kepercayaan lebih besar daripada alat yang mengklaim tidak memiliki apa pun, dan persentase yang tidak dijelaskan berikutnya pada sebuah laporan adalah tempat yang baik untuk mulai bertanya jenis alat apa yang menghasilkannya.

Temuan Riset Kami Sendiri

Dalam studi kesepakatan detektor TextPulse Research, sembilan detektor AI komersial menilai 90 teks akademik yang sama. Salah satunya adalah teks hibrida 455 kata: pembuka dan penutup tulisan manusia yang mengapit bagian tengah 168 kata buatan AI. GPTZero memberi teks ini skor 41.2% AI, sementara vonis alat lain atas kata-kata yang sama berkisar dari 0% hingga 95.7% AI. Makalah lengkap, korpus, dan matriks skor tiap alat tersedia terbuka di TextPulse Research.

GPTZero pada teks hibrida dari korpus studi.
GPTZero pada teks hibrida dari korpus studi.
XLinkedInFacebook

Pertanyaan yang Sering Diajukan

Tidak. Pusat dukungan GPTZero menyatakan bahwa perusahaan berhenti menggunakan perplexity dan burstiness untuk deteksi sejak musim gugur 2023, setelah beralih ke pengklasifikasi deep-learning. Halaman teknologi saat ini menjelaskan model klasifikasi kalimat demi kalimat dan tidak menyebutkan salah satu istilah tersebut. Deskripsi itu masih beredar karena penjelasan GPTZero sendiri pada 2023 memopulerkan kedua kata itu sebelum metodenya berubah.

Moe

PhD in natural language processing, with years spent building NLP applications end to end. Moe works on text analysis: lexical and syntactic structure, and what separates machine-generated prose from human prose statistically. He has been experimenting with computational linguistics since the early days of NLTK, spaCy and WordNet, and still writes most of his tooling in Python.

Tetap terupdate tentang humanisasi AI

Dapatkan tips tentang penulisan akademik, deteksi AI, dan humanisasi yang dikirim ke kotak masuk Anda.

Tanpa spam. Berhenti berlangganan kapan saja.