Turnitin Similarity Score vs AI Score: Dua Laporan Berbeda
Skor similarity dan skor AI menjawab pertanyaan yang berbeda, sehingga sebuah makalah dapat memperoleh skor rendah pada salah satunya dan tinggi pada yang lain tanpa salah satu angka itu keliru. Apa yang diukur masing-masing, apa yang memicunya, dan apa yang dibuktikan serta tidak dibuktikan oleh angka tinggi.
Sebuah laporan muncul dengan dua angka di dalamnya: skor kemiripan 3 persen dan skor AI 88 persen. Pembacaan yang wajar adalah bahwa keduanya pasti mengukur hal yang sama, sehingga angka yang rendah seharusnya berarti angka yang tinggi mungkin juga salah. Kenyataannya tidak demikian. Turnitin similarity vs AI score adalah perbandingan antara dua sistem terpisah yang memeriksa dua hal terpisah, dan sebuah pengiriman dapat memperoleh skor rendah pada yang satu dan tinggi pada yang lain tanpa salah satu angka itu merupakan kesalahan.
Fitur yang lebih lama daripada yang AI, dibuat untuk menangkap teks yang cocok dengan sesuatu yang sudah ada. Fitur yang lebih baru, ditambahkan ke Similarity Report yang sama sebagai pengukuran independennya sendiri, dibuat untuk memperkirakan apakah prosa terbaca seperti dihasilkan mesin, terlepas dari apakah ia cocok dengan apa pun atau tidak. Keduanya sepenuhnya independen dan tidak saling memengaruhi, menurut dokumentasi Turnitin sendiri. Semua hal lain dalam bagian ini.
Turnitin Similarity vs AI Score: Apa yang Dilaporkan oleh Setiap Angka
Turnitin memperlakukan keduanya sebagai pengukuran berbeda yang digabungkan ke dalam satu produk, bukan dua sudut pandang atas satu hasil. Similarity Report membandingkan sebuah pengiriman dengan basis data konten web, publikasi akademik, dan makalah mahasiswa yang sebelumnya telah dikirimkan, lalu mengembalikan persentase teks pengiriman yang cocok dengan sesuatu yang sudah ada dalam basis data itu. Deteksi penulisan AI menjalankan model yang sepenuhnya berbeda, ditambahkan ke laporan yang sama sebagai skor independennya sendiri, model yang dilatih untuk menilai seberapa dekat prosa suatu bagian menyerupai tulisan yang dihasilkan mesin, tanpa merujuk pada basis data eksternal apa pun. Mekanisme yang lebih lengkap dari bagaimana pengklasifikasi AI Turnitin mencapai angka itu dibahas secara terpisah, yang penting di sini adalah bahwa ia menjawab pertanyaan yang berbeda dari mesin kemiripan yang berada di dalam laporan yang sama.
Apa yang Sebenarnya Diukur oleh Skor Kemiripan
Kesamaan adalah latihan pencocokan, bukan penilaian. Panduan Turnitin sendiri secara eksplisit menyatakan bahwa alat ini tidak memeriksa plagiarisme. Alat ini memeriksa kemiripan dan menyerahkan penafsirannya kepada pengajar yang membaca laporan. Kutipan yang dipisahkan dengan benar, frasa bagian metode yang dibagikan di seluruh subbidang, daftar referensi yang diformat dengan cara yang sama seperti setiap makalah di jurnal memformat daftar referensinya, semuanya dapat tercatat sebagai kecocokan, karena sistem menghitung string teks yang tumpang tindih, bukan menilai apakah tumpang tindih itu sah.
Itulah juga sebabnya skor kesamaan nol membuktikan lebih sedikit daripada yang tampak. Itu berarti naskah yang diserahkan tidak mengandung rentang teks panjang yang utuh yang ditemukan di tempat lain dalam sumber terindeks Turnitin. Itu tidak mengatakan apa pun tentang bagaimana kalimat yang ada di dalamnya dihasilkan, karena menghasilkan kalimat yang tidak cocok dengan apa pun dalam basis data bukanlah keterampilan yang sama dengan menghasilkan kalimat yang tidak akan diprediksi oleh model bahasa.
Humanisasi makalah Anda sendiri
Ubah teks berbantuan AI Anda dan buat terdengar manusiawi, tanpa menyentuh kata penting atau sitasi.
Apa yang Sebenarnya Diukur oleh Skor AI
Skor AI tidak memiliki basis data untuk dibandingkan. Sebuah pengklasifikasi membaca prosa yang diserahkan dan memperkirakan, dari pola yang dipelajarinya melalui contoh-contoh tulisan manusia dan tulisan yang dihasilkan AI, seberapa besar kemungkinan prosa itu berasal dari model, bukan dari seseorang. Tidak ada bagian dari perkiraan itu yang bergantung pada apakah kalimat yang persis sama pernah muncul di mana pun sebelumnya. Sebuah kalimat dapat sepenuhnya unik, belum pernah diketik oleh siapa pun sampai naskah ini diserahkan, dan tetap terbaca sebagai tipikal secara statistik dari keluaran AI jika pilihan kata dan ritmenya mengikuti pola yang cenderung dihasilkan oleh model bahasa.
Ini adalah wilayah statistik yang sama yang dibahas sepenuhnya dalam uraian yang lebih luas tentang bagaimana pendeteksi AI sebenarnya bekerja: keterprediksian pada tingkat kata dan ritme pada tingkat kalimat, digabungkan menjadi satu skor dokumen. Versi pengklasifikasi Turnitin bersifat proprieter, tetapi premis dasarnya, bahwa teks yang dihasilkan cenderung lebih tipikal secara statistik daripada tulisan manusia, adalah premis yang sama yang bekerja di bawah setiap alat dalam kategori ini.
| Skor Kemiripan | Skor AI | |
|---|---|---|
| Apa yang diukur | Seberapa banyak teks dalam pengajuan yang cocok dengan dokumen terindeks lainnya | Seberapa dekat prosa tersebut menyerupai tulisan yang secara statistik khas dihasilkan AI |
| Apa yang memicu angka tinggi | Kutipan panjang, frasa umum yang khas bidang tertentu, materi yang digunakan kembali, atau kecocokan dengan pengajuan sebelumnya | Irama kalimat yang seragam dan pilihan kata yang secara konsisten dapat diprediksi di seluruh dokumen |
| Apa yang tidak dibuktikan oleh angka tinggi | Bahwa teks yang cocok itu digunakan secara tidak semestinya. Materi yang dikutip dengan benar tetap dapat terdeteksi sebagai kecocokan. | Bahwa satu kalimat pun dihasilkan oleh AI. Pengklasifikasi membaca pola keseluruhan dokumen, bukan satu baris secara terpisah. |
Bisakah Sebuah Makalah Memiliki Kemiripan 0 Persen dan Skor AI 90 Persen?
Ya, dan kombinasi ini bukan gangguan. Kedua skor tersebut menjawab pertanyaan yang berbeda, sehingga keempat kombinasi tinggi dan rendah mungkin terjadi, dan masing-masing mengisyaratkan sesuatu yang berbeda tentang bagaimana teks itu dihasilkan.
- Kemiripan rendah, skor AI rendah: tulisan asli yang biasa, yang juga terbaca dengan variasi manusia yang lazim. Ini adalah kasus umum untuk sebagian besar karya mahasiswa yang benar-benar asli.
- Kemiripan rendah, skor AI tinggi: kalimat asli, tidak disalin dari mana pun, yang terbaca secara statistik dapat diprediksi seperti kecenderungan teks yang dihasilkan. Ini adalah ciri tulisan AI yang belum diedit, yang tidak diparafrasekan dari sumber yang sudah ada.
- Kemiripan tinggi, skor AI rendah: teks yang sangat cocok dengan sumber yang ditulis manusia yang sudah ada, tanpa kerataan statistik yang diasosiasikan pengklasifikasi dengan generasi. Teks yang disalin, terdeteksi oleh alat yang lebih lama, bukan yang lebih baru.
- Kemiripan tinggi, skor AI tinggi: teks yang cocok dengan sumber yang sudah ada yang juga dihasilkan AI, misalnya makalah yang sebelumnya diajukan dan ditulis AI atau halaman teks yang dihasilkan AI yang sudah terindeks dari web terbuka.
Tidak satu pun dari kombinasi ini memerlukan sesuatu yang tidak biasa pada sisi perangkat lunak. Hal ini muncul dari fakta bahwa satu sistem memeriksa kecocokan dan yang lain memeriksa pola, dan suatu bagian teks dapat membawa salah satu sifat itu, keduanya, atau tidak keduanya.
Apa yang Dibuktikan, dan Tidak Dibuktikan, oleh Skor AI yang Tinggi
Skor AI yang tinggi adalah estimasi statistik, bukan pengakuan yang diekstraksi dari teks. Skor ini menyatakan bahwa prosa di hadapan pengklasifikasi menyerupai, dalam pilihan kata dan ritmenya, jenis tulisan yang dilatih untuk diasosiasikan oleh model dengan generasi AI. Skor ini tidak mengidentifikasi kalimat tertentu sebagai pasti ditulis mesin, dan tidak mengetahui apa pun tentang bagaimana dokumen itu sebenarnya diproduksi, hanya bagaimana dokumen itu terbaca setelah selesai. TextPulse mengambil posisi yang sama tentang angkanya sendiri: yang dilaporkannya adalah Human Score yang diperkirakan dan dihitung dari teks di hadapannya, bukan putusan tentang alat mana, jika ada, yang menyentuh dokumen itu.
Respons praktis terhadap salah satu angka itu, skor kemiripan yang rendah atau skor AI yang tinggi, adalah sama: perlakukan itu sebagai alasan untuk melihat lebih dekat, bukan sebagai temuan yang harus diterima atau ditolak begitu saja. Draf, catatan, dan riwayat versi menunjukkan bagaimana suatu dokumen benar-benar ditulis dengan cara yang tidak pernah dapat dilakukan oleh persentase, pada laporan mana pun. Siapa pun yang ingin tahu apa yang sebenarnya ditanggapi oleh pengklasifikasi dalam drafnya sendiri dapat melihat pola pada tingkat kata yang sama untuk dirinya sendiri dengan free perplexity checker, jauh sebelum laporan apa pun dihasilkan.
Koleksi free tools collection TextPulse mencakup lapisan statistik lain yang layak diperiksa sebelum suatu draf mendekati pengajar, bukan hanya dua yang dibandingkan di sini.
Setelah kedua angka dipisahkan, pertanyaan berikutnya adalah apa yang dianggap sebagai skor Turnitin yang baik. Untuk detektor lain yang paling sering ditemui mahasiswa, cara kerja GPTZero dibahas pada halamannya sendiri.
Dua angka itu akan terus berada berdampingan pada laporan yang sama, dan akan terus dibaca sebagai satu angka oleh orang yang terburu-buru. Mengetahui pertanyaan mana yang sebenarnya dijawab oleh masing-masing angka itulah yang mengubah sepasang persentase yang membingungkan menjadi dua informasi yang terpisah dan berguna.
Pertanyaan yang Sering Diajukan
Turnitin similarity vs AI score bergantung pada apa yang diperiksa masing-masing. Skor similarity melaporkan seberapa banyak suatu pengumpulan cocok dengan teks yang sudah ada dalam basis data Turnitin atas halaman web, publikasi, dan makalah mahasiswa sebelumnya. Skor AI adalah pengukuran terpisah dan independen yang memperkirakan seberapa dekat prosa tersebut terbaca sebagai hasil mesin, tanpa merujuk pada basis data apa pun. Dokumentasi resmi Turnitin menyatakan bahwa kedua angka itu tidak saling memengaruhi.
PhD in natural language processing, with years spent building NLP applications end to end. Moe works on text analysis: lexical and syntactic structure, and what separates machine-generated prose from human prose statistically. He has been experimenting with computational linguistics since the early days of NLTK, spaCy and WordNet, and still writes most of his tooling in Python.