Plagiarism Detector ei ole musta laatikko. Sen tunnistusmoottori on osallistunut alan ensisijaiseen tieteelliseen vertailutestiin — PAN-kilpailuun — ja riippumattomat akateemiset järjestäjät ovat arvioineet sen yhdeksässä kansainvälisessä arvioinnissa. Täydellinen kilpailutulos on alla; jokainen tulos linkittää viralliseen lähteeseen.
| Vuosi | Kilpailu | Tapahtumapaikka | Tehtävä | Sijoitus | Pistemäärä | Lähde |
|---|---|---|---|---|---|---|
| 2009 | 1. International Competition on Plagiarism Detection | PAN @ SEPLN · San Sebastián | Ulkoinen tunnistus | 4 / 10 | 0.3045 | yleiskatsaus |
| 2010 | 2. International Competition on Plagiarism Detection | PAN @ CLEF · Padua | Ulkoinen tunnistus | 8 / 18 | 0.5093 | yleiskatsaus · artikkeli |
| 2011 | 3. International Competition on Plagiarism Detection | PAN @ CLEF · Amsterdam | Ulkoinen (WordNet-koe) | 7 / 9 | 0.19 | yleiskatsaus · artikkeli |
| 2011 | CL!TR — Cross-Language Indian Text Re-Use | PAN@FIRE · IIT Bombay, Mumbai | Hindi↔English reuse | 4 (paras suoritus) | F 0.603 | tuloslistaus · yleiskatsaus |
| 2012 | 4. International Competition on Plagiarism Detection | PAN @ CLEF · Rome | Tekstin kohdistus | 6 / 10 | 0.538 | yleiskatsaus · artikkeli |
| 2012 | CL!NSS — Cross-Language Indian News Story Search 1ST | PAN@FIRE · ISI Kolkata | Journalistinen uudelleenkäyttö (en→hi) | 1 / 3 | NDCG@10 0.34 | yleiskatsaus · artikkeli |
| 2013 | 5. International Competition on Plagiarism Detection | PAN @ CLEF · Valencia | Tekstin kohdistus | 6 / 9 | 0.61523 | yleiskatsaus · artikkeli |
| 2014 | 6. International Competition on Plagiarism Detection 1ST* | PAN @ CLEF · Sheffield | Tekstin kohdistus | 1 std · 3/10 | 0.868 | yleiskatsaus · artikkeli |
| 2026 | Voight-Kampff Generative AI Detection TOP AUC | PAN @ CLEF · Jena | Ihminen vai tekoäly | 3 / 34 | ROC-AUC 0.996 | tuloslistaus |
plagdet = PANin kokonaisplagiarismin havaitsemispisteet (tarkkuus, kattavuus ja granulariteetti yhdistettynä). NDCG@10 = hakutulosten laatu. ROC-AUC = kynnysarvoista riippumaton luokittelulaatu. *2014: 1. sijalla vakiotestitiineistöllä, 3. sijalla 10:stä virallisella sijoituskorpuksella. 2026: 3. sijalle 34 joukkueen joukosta; korkein ROC-AUC minkä tahansa joukkueen tai lähtötason joukossa.
Jokainen kilpailu dokumentoi tekniikan, joka vaikuttaa julkaistuun moottoriin. Tutkimus ja ohjelmisto muodostavat yhden kehityslinjan — ei markkinointiväitteitä, vaan julkaistuja, vertaisarvioituja menetelmiä.
Nopea ehdokastunnistus uudelleenkäytetyistä katkelmista (PAN 2010, 2014).
Lähteiden ↔ epäilyttävien katkelmien korkean tarkkuuden täsmäytys (PAN 2012–2014).
WordNet ja TF-IDF / käännösmenetelmät parafraasien ja kielten välisen uudelleenkäytön tunnistamiseen (PAN 2011; FIRE 2011–2012).
Ihmisen ja koneen kirjoittaman tekstin erottaminen toisistaan — korkein ROC-AUC PAN 2026:ssa.