Naviger til toppen
Videnskabelig historik

En uafhængigt verificerbar benchmark-historik, 2009 – 2026

Plagiatdetektor er ikke en sort boks. Detektionsmotoren er blevet indsendt til feltets primære videnskabelige benchmark — PAN-konkurrencen — og bedømt af uafhængige akademiske arrangører på tværs af ni internationale evalueringer. Den komplette historik er nedenfor; hvert resultat linker til sin officielle kilde.

Kort fortalt Mellem 2009 og 2014 deltog motoren i alle seks årlige internationale PAN-konkurrencer om plagiatdetektering og i to PAN@FIRE-opgaver inden for tværsproglig genbrug i Indien — og vandt den engelske–hindi CL!NSS-opgave i 2012. I 2026 deltog den samme linje i PANs Voight-Kampff Generative AI Detection-opgave og registrerede den højeste ROC-AUC (0.996) af alle systemer i evalueringen, og placerede sig som nr. 3 ud af 34 hold. Produktet har været i drift siden 2007.
Komplet konkurrencehistorik

Ni evalueringer, hvert resultat med kilde

ÅrKonkurrenceStedOpgavePlaceringScoreKilde
20091. Internationale Konkurrence om PlagiatdetekteringPAN @ SEPLN · San SebastiánEkstern detektion4 / 100.3045oversigt
20102. Internationale Konkurrence om PlagiatdetekteringPAN @ CLEF · PaduaEkstern detektion8 / 180.5093oversigt · artikel
20113. Internationale Konkurrence om PlagiatdetekteringPAN @ CLEF · AmsterdamEkstern (WordNet-eksperiment)7 / 90.19oversigt · artikel
2011CL!TR — Cross-Language Indian Text Re-UsePAN@FIRE · IIT Bombay, MumbaiHindi↔engelsk genbrug4 (bedste kørsel)F 0.603rangliste · oversigt
20124. Internationale Konkurrence om PlagiatdetekteringPAN @ CLEF · RomeTekstjustering6 / 100.538oversigt · artikel
2012CL!NSS — Cross-Language Indian News Story Search 1STPAN@FIRE · ISI KolkataJournalistisk genbrug (en→hi)1 / 3NDCG@10 0.34oversigt · artikel
20135. Internationale Konkurrence om PlagiatdetekteringPAN @ CLEF · ValenciaTekstjustering6 / 90.61523oversigt · artikel
20146. Internationale Konkurrence om Plagiatdetektering 1ST*PAN @ CLEF · SheffieldTekstjustering1 std · 3/100.868oversigt · artikel
2026Voight-Kampff Generative AI Detection TOP AUCPAN @ CLEF · JenaMenneske-vs-AI-tekst3 / 34ROC-AUC 0.996rangliste

plagdet = den samlede PAN-score for plagiatdetektering (præcision, recall og granularitet kombineret). NDCG@10 = rankingkvalitet. ROC-AUC = tærskeluafhængig klassifikationskvalitet. *2014: 1. på standardtestkorpusset, 3. ud af 10 på det officielle rankingkorpus. 2026: 3. ud af 34 hold; højeste ROC-AUC af alle hold eller baselines.

Fra laboratoriet til produktet

De metoder, du stoler på

Hver konkurrence dokumenterede en teknik, der informerer den leverede motor. Forskningen og softwaren er én linje — ikke markedsføringspåstande, men publicerede, fagfællebedømte metoder.

N-gram-fingeraftryk

Hurtig kandidatdetektion af genbrugte passager (PAN 2010, 2014).

Tekstjustering

Præcis matchning af kilde ↔ mistænkte passager med høj præcision (PAN 2012–2014).

Semantisk og tværsproglig lighed

WordNet og TF-IDF / oversættelsesmetoder til omskrivning og tværsprogligt genbrug (PAN 2011; FIRE 2011–2012).

Detektion af AI-genereret tekst

At skelne menneskelig forfatterskab fra maskinforfatterskab — top ROC-AUC ved PAN 2026.

Fagfællebedømte publikationer

Bibliografi

  1. Developing a High-Resolution Universal Multi-Type N-Gram Plagiarism Detector. Palkovskii & Belov. PAN @ CLEF 2014 Working Notes. CEUR-WS Vol-1180 ↗
  2. Using Hybrid Similarity Methods for Plagiarism Detection. Palkovskii & Belov. PAN @ CLEF 2013. CEUR-WS Vol-1179 ↗
  3. Applying Specific Clusterization & Fingerprint Density Distribution with a Genetic Algorithm. Palkovskii & Belov. PAN @ CLEF 2012. CEUR-WS Vol-1178 ↗
  4. Using a TF-IDF Weight Ranking Model in CL!NSS. Palkovskii & Belov. FIRE 2012, ISI Kolkata. FIRE working notes ↗
  5. Using WordNet-Based Semantic Similarity Measurement in External Plagiarism Detection. Palkovskii & Belov. PAN @ CLEF 2011. CEUR-WS Vol-1177 ↗
  6. Exploring Fingerprinting as an External Plagiarism Detection Method. Palkovskii & Belov. PAN @ CLEF 2010. CEUR-WS Vol-1176 ↗
  7. "Counter Plagiarism Detection Software" & "Counter-Counter Plagiarism Detection" Methods. Palkovskii. PAN'09. CEUR-WS Vol-502 ↗
Om forfatteren
YP

Yurii Palkovskii

Forsker og ledende udvikler · Zhytomyr State University, Institute of Foreign Philology · SkyLine LLC

Forfatter af syv fagfællebedømte artikler om plagiat og detektion af AI-genereret tekst i CLEF/CEUR-WS og FIRE-proceedings, med resultater evalueret uafhængigt af PAN-organisationskomitéen (Potthast, Stein, Rosso, Hagen et al.).

Hver placering og score på denne side er hentet fra det officielle konkurrenceoversigtsartikel eller den rangliste, der er linket ved siden af — uafhængigt verificerbar fra dette websted. Produktet er i aktiv udvikling siden 2007; nuværende version #2965.