Naviger til toppen
Vitenskapelig rekord

En uavhengig verifiserbar benchmarkrekord, 2009 – 2026

Plagiatdetektor er ikke en svart boks. Deteksjonsmotoren har deltatt i feltets primære vitenskapelige benchmark — PAN-konkurransen — og blitt vurdert av uavhengige akademiske arrangører på tvers av ni internasjonale evalueringer. Den fullstendige rekorden er nedenfor; hvert resultat lenker til sin offisielle kilde.

Kort fortalt Mellom 2009 og 2014 deltok motoren i alle seks årlige PAN International Competitions on Plagiarism Detection og i to PAN@FIRE-tverrspråklige oppgaver i India — og vant den engelske–hindiske CL!NSS-oppgaven i 2012. I 2026 deltok den samme linjen i PANs Voight-Kampff Generative AI Detection-oppgave og registrerte den høyeste ROC-AUC (0.996) av alle systemer i evalueringen, og kom på 3. plass av 34 lag. Produktet har vært i kontinuerlig distribusjon siden 2007.
Fullstendig konkurranserekord

Ni evalueringer, hvert resultat med kilde

ÅrKonkurranseStedOppgavePlasseringPoengsumKilde
20091. International Competition on Plagiarism DetectionPAN @ SEPLN · San SebastiánEkstern deteksjon4 / 100.3045oversikt
20102. International Competition on Plagiarism DetectionPAN @ CLEF · PaduaEkstern deteksjon8 / 180.5093oversikt · artikkel
20113. International Competition on Plagiarism DetectionPAN @ CLEF · AmsterdamEkstern (WordNet-eksperiment)7 / 90.19oversikt · artikkel
2011CL!TR — Cross-Language Indian Text Re-UsePAN@FIRE · IIT Bombay, MumbaiHindi↔English gjenbruk4 (beste kjøring)F 0.603resultattavle · oversikt
20124. International Competition on Plagiarism DetectionPAN @ CLEF · RomeTekstjustering6 / 100.538oversikt · artikkel
2012CL!NSS — Cross-Language Indian News Story Search 1STPAN@FIRE · ISI KolkataJournalistisk gjenbruk (en→hi)1 / 3NDCG@10 0.34oversikt · artikkel
20135. International Competition on Plagiarism DetectionPAN @ CLEF · ValenciaTekstjustering6 / 90.61523oversikt · artikkel
20146. International Competition on Plagiarism Detection 1ST*PAN @ CLEF · SheffieldTekstjustering1 std · 3/100.868oversikt · artikkel
2026Voight-Kampff Generative AI Detection TOP AUCPAN @ CLEF · JenaMenneske vs. AI-tekst3 / 34ROC-AUC 0.996resultattavle

plagdet = den samlede PAN-poengsummen for plagiatsdeteksjon (presisjon, gjenkalling og granularitet kombinert). NDCG@10 = rangeringskvalitet. ROC-AUC = terskeluavhengig klassifiseringskvalitet. *2014: 1. plass på standard testkorpus, 3. av 10 på det offisielle rangeringskorpuset. 2026: 3. av 34 lag; høyeste ROC-AUC av alle lag eller basislinjer.

Fra laboratoriet til produktet

Metodene du stoler på

Hver konkurranse dokumenterte en teknikk som ligger til grunn for den leverte motoren. Forskningen og programvaren er én linje — ikke markedsføringspåstander, men publiserte, fagfellevurderte metoder.

N-gram-fingeravtrykk

Rask kandidatdeteksjon av gjenbrukte passasjer (PAN 2010, 2014).

Tekstjustering

Presis matching av kilde ↔ mistenkelige passasjer med høy presisjon (PAN 2012–2014).

Semantisk og tverrspråklig likhet

WordNet og TF-IDF / oversettelsesmetoder for parafraser og tverrspråklig gjenbruk (PAN 2011; FIRE 2011–2012).

Deteksjon av AI-generert tekst

Å skille menneskelig fra maskinbasert forfatterskap — topp ROC-AUC ved PAN 2026.

Fagfellevurderte publikasjoner

Bibliografi

  1. Developing a High-Resolution Universal Multi-Type N-Gram Plagiarism Detector. Palkovskii & Belov. PAN @ CLEF 2014 Working Notes. CEUR-WS Vol-1180 ↗
  2. Using Hybrid Similarity Methods for Plagiarism Detection. Palkovskii & Belov. PAN @ CLEF 2013. CEUR-WS Vol-1179 ↗
  3. Applying Specific Clusterization & Fingerprint Density Distribution with a Genetic Algorithm. Palkovskii & Belov. PAN @ CLEF 2012. CEUR-WS Vol-1178 ↗
  4. Using a TF-IDF Weight Ranking Model in CL!NSS. Palkovskii & Belov. FIRE 2012, ISI Kolkata. FIRE working notes ↗
  5. Using WordNet-Based Semantic Similarity Measurement in External Plagiarism Detection. Palkovskii & Belov. PAN @ CLEF 2011. CEUR-WS Vol-1177 ↗
  6. Exploring Fingerprinting as an External Plagiarism Detection Method. Palkovskii & Belov. PAN @ CLEF 2010. CEUR-WS Vol-1176 ↗
  7. "Counter Plagiarism Detection Software" & "Counter-Counter Plagiarism Detection" Methods. Palkovskii. PAN'09. CEUR-WS Vol-502 ↗
Om forfatteren
YP

Yurii Palkovskii

Forsker og ledende utvikler · Zhytomyr State University, Institute of Foreign Philology · SkyLine LLC

Forfatter av syv fagfellevurderte artikler om plagiat og deteksjon av AI-generert tekst i CLEF/CEUR-WS- og FIRE-prosedyrene, med resultater uavhengig evaluert av PAN-organisasjonskomiteen (Potthast, Stein, Rosso, Hagen m.fl.).

Hver plassering og poengsum på denne siden er hentet fra den offisielle konkurransen oversiktsartikkel eller resultattavle lenket ved siden av den — uavhengig verifiserbar fra dette nettstedet. Produktet er i aktiv utvikling siden 2007; gjeldende bygg #2965.