Детектор за плагиатство не е черна кутия. Неговият двигател за засичане е участвал в основния научен бенчмарк в областта — състезанието PAN — и е бил оценяван от независими академични организатори в девет международни оценявания. Пълният архив е представен по-долу; всеки резултат е свързан с официалния си източник.
| Година | Състезание | Място на провеждане | Задача | Класиране | Резултат | Източник |
|---|---|---|---|---|---|---|
| 2009 | 1-во Международно състезание за разпознаване на плагиатство | PAN @ SEPLN · San Sebastián | Външно разпознаване | 4 / 10 | 0.3045 | преглед |
| 2010 | 2-ро Международно състезание за разпознаване на плагиатство | PAN @ CLEF · Padua | Външно разпознаване | 8 / 18 | 0.5093 | преглед · статия |
| 2011 | 3-то Международно състезание за разпознаване на плагиатство | PAN @ CLEF · Amsterdam | Външно (WordNet експеримент) | 7 / 9 | 0.19 | преглед · статия |
| 2011 | CL!TR — Cross-Language Indian Text Re-Use | PAN@FIRE · IIT Bombay, Mumbai | Hindi↔English повторна употреба | 4 (най-добро изпълнение) | F 0.603 | класация · преглед |
| 2012 | 4-то Международно състезание за разпознаване на плагиатство | PAN @ CLEF · Rome | Текстово изравняване | 6 / 10 | 0.538 | преглед · статия |
| 2012 | CL!NSS — Cross-Language Indian News Story Search 1ST | PAN@FIRE · ISI Kolkata | Журналистическа повторна употреба (en→hi) | 1 / 3 | NDCG@10 0.34 | преглед · статия |
| 2013 | 5-то Международно състезание за разпознаване на плагиатство | PAN @ CLEF · Valencia | Текстово изравняване | 6 / 9 | 0.61523 | преглед · статия |
| 2014 | 6-то Международно състезание за разпознаване на плагиатство 1ST* | PAN @ CLEF · Sheffield | Текстово изравняване | 1 std · 3/10 | 0.868 | преглед · статия |
| 2026 | Voight-Kampff Generative AI Detection TOP AUC | PAN @ CLEF · Jena | Разграничаване на човек от AI | 3 / 34 | ROC-AUC 0.996 | класация |
plagdet = общият резултат на PAN за разпознаване на плагиатство (комбинация от прецизност, пълнота и гранулярност). NDCG@10 = качество на класиране. ROC-AUC = качество на класификация, независимо от прага. *2014: 1-во място на стандартния тестови корпус, 3-то от 10 в официалния класиращ корпус. 2026: 3-то от 34 отбора; най-висок ROC-AUC сред всички отбори и базови линии.
Всяко състезание е документирало техника, която е залегнала в основата на работещия двигател. Изследванията и софтуерът са от една линия — не маркетингови твърдения, а публикувани, рецензирани методи.
Бързо разпознаване на кандидати за повторно използвани пасажи (PAN 2010, 2014).
Прецизно съпоставяне на изходни ↔ подозрителни пасажи с висока точност (PAN 2012–2014).
WordNet и TF-IDF / методи за превод при парафразиране и кръстоезикова повторна употреба (PAN 2011; FIRE 2011–2012).
Разграничаване на човешко от машинно авторство — най-висок ROC-AUC на PAN 2026.
Стойте с Украйна!