Plagiarism Detector bukanlah kotak hitam. Mesin deteksinya telah diikutsertakan dalam tolok ukur ilmiah utama di bidang ini — kompetisi PAN — dan dinilai oleh para penyelenggara akademis independen dalam sembilan evaluasi internasional. Rekam lengkapnya tersedia di bawah; setiap hasil tertaut ke sumber resminya.
| Tahun | Kompetisi | Tempat | Tugas | Peringkat | Skor | Sumber |
|---|---|---|---|---|---|---|
| 2009 | Kompetisi Internasional Pertama tentang Deteksi Plagiarisme | PAN @ SEPLN · San Sebastián | Deteksi eksternal | 4 / 10 | 0.3045 | ikhtisar |
| 2010 | Kompetisi Internasional Kedua tentang Deteksi Plagiarisme | PAN @ CLEF · Padua | Deteksi eksternal | 8 / 18 | 0.5093 | ikhtisar · makalah |
| 2011 | Kompetisi Internasional Ketiga tentang Deteksi Plagiarisme | PAN @ CLEF · Amsterdam | Eksternal (eksperimen WordNet) | 7 / 9 | 0.19 | ikhtisar · makalah |
| 2011 | CL!TR — Cross-Language Indian Text Re-Use | PAN@FIRE · IIT Bombay, Mumbai | Penggunaan ulang bahasa Hindi↔Inggris | 4 (run terbaik) | F 0.603 | papan peringkat · ikhtisar |
| 2012 | Kompetisi Internasional Keempat tentang Deteksi Plagiarisme | PAN @ CLEF · Rome | Penyelarasan teks | 6 / 10 | 0.538 | ikhtisar · makalah |
| 2012 | CL!NSS — Cross-Language Indian News Story Search 1ST | PAN@FIRE · ISI Kolkata | Penggunaan ulang jurnalistik (en→hi) | 1 / 3 | NDCG@10 0.34 | ikhtisar · makalah |
| 2013 | Kompetisi Internasional Kelima tentang Deteksi Plagiarisme | PAN @ CLEF · Valencia | Penyelarasan teks | 6 / 9 | 0.61523 | ikhtisar · makalah |
| 2014 | Kompetisi Internasional Keenam tentang Deteksi Plagiarisme 1ST* | PAN @ CLEF · Sheffield | Penyelarasan teks | 1 std · 3/10 | 0.868 | ikhtisar · makalah |
| 2026 | Voight-Kampff Generative AI Detection TOP AUC | PAN @ CLEF · Jena | Teks manusia vs. AI | 3 / 34 | ROC-AUC 0.996 | papan peringkat |
plagdet = skor deteksi plagiarisme PAN secara keseluruhan (presisi, recall, dan granularitas digabungkan). NDCG@10 = kualitas peringkat. ROC-AUC = kualitas klasifikasi tanpa ambang batas. *2014: 1st on the standard test corpus, 3rd of 10 on the official ranking corpus. 2026: 3rd of 34 teams; highest ROC-AUC of any team or baseline.
Setiap kompetisi mendokumentasikan teknik yang menginformasikan mesin yang dikirimkan. Penelitian dan perangkat lunak adalah satu garis keturunan — bukan klaim pemasaran, melainkan metode yang diterbitkan dan ditinjau oleh rekan sejawat.
Deteksi kandidat cepat untuk bagian teks yang digunakan kembali (PAN 2010, 2014).
Pencocokan tepat antara bagian sumber ↔ yang dicurigai dengan presisi tinggi (PAN 2012–2014).
Metode WordNet dan TF-IDF / terjemahan untuk penggunaan ulang parafrase dan lintas bahasa (PAN 2011; FIRE 2011–2012).
Membedakan kepengarangan manusia dari mesin — ROC-AUC tertinggi di PAN 2026.