Navigera till toppen
Vetenskaplig meritlista

En oberoende verifierbar benchmarkhistorik, 2009 – 2026

Plagiatdetektor är ingen svart låda. Dess detekteringsmotor har deltagit i fältets primära vetenskapliga benchmark — PAN-tävlingen — och bedömts av oberoende akademiska arrangörer i nio internationella utvärderingar. Den fullständiga historiken finns nedan; varje resultat länkar till sin officiella källa.

I korthet Mellan 2009 och 2014 deltog motorn i alla sex årliga PAN International Competitions on Plagiarism Detection och i två PAN@FIRE-uppgifter för korsspråklig analys i Indien — och vann den engelska–hindi-uppgiften CL!NSS 2012. År 2026 deltog samma kodbas i PAN:s Voight-Kampff Generative AI Detection-uppgift och noterade den högsta ROC-AUC (0.996) av alla system i utvärderingen, och placerade sig på 3:e plats av 34 lag. Produkten har levererats kontinuerligt sedan 2007.
Fullständig tävlingshistorik

Nio utvärderingar, varje resultat med källhänvisning

ÅrTävlingPlatsUppgiftPlaceringPoängKälla
20091:a International Competition on Plagiarism DetectionPAN @ SEPLN · San SebastiánExtern detektering4 / 100.3045översikt
20102:a International Competition on Plagiarism DetectionPAN @ CLEF · PaduaExtern detektering8 / 180.5093översikt · artikel
20113:e International Competition on Plagiarism DetectionPAN @ CLEF · AmsterdamExtern (WordNet-experiment)7 / 90.19översikt · artikel
2011CL!TR — Cross-Language Indian Text Re-UsePAN@FIRE · IIT Bombay, MumbaiHindi↔English återanvändning4 (bästa körning)F 0.603resultattabell · översikt
20124:e International Competition on Plagiarism DetectionPAN @ CLEF · RomeTextjustering6 / 100.538översikt · artikel
2012CL!NSS — Cross-Language Indian News Story Search 1STPAN@FIRE · ISI KolkataJournalistisk återanvändning (en→hi)1 / 3NDCG@10 0.34översikt · artikel
20135:e International Competition on Plagiarism DetectionPAN @ CLEF · ValenciaTextjustering6 / 90.61523översikt · artikel
20146:e International Competition on Plagiarism Detection 1ST*PAN @ CLEF · SheffieldTextjustering1 std · 3/100.868översikt · artikel
2026Voight-Kampff Generative AI Detection TOP AUCPAN @ CLEF · JenaMänniska kontra AI-text3 / 34ROC-AUC 0.996resultattabell

plagdet = PAN:s samlade poäng för plagiatdetektering (precision, återkallning och granularitet kombinerat). NDCG@10 = rankningskvalitet. ROC-AUC = tröskelfri klassificeringskvalitet. *2014: 1:a på det standardiserade testkorpuset, 3:a av 10 på det officiella rankningskorpuset. 2026: 3:a av 34 lag; högsta ROC-AUC av alla lag eller baslinjer.

Från laboratoriet till produkten

Metoderna du litar på

Varje tävling dokumenterade en teknik som informerar den levererade motorn. Forskningen och programvaran är en och samma linje — inte marknadsföringspåståenden, utan publicerade, kollegialt granskade metoder.

N-gram-fingeravtryck

Snabb kandidatdetektering av återanvända textpassager (PAN 2010, 2014).

Textjustering

Exakt matchning av käll- ↔ misstänkta passager med hög precision (PAN 2012–2014).

Semantisk och korsspråklig likhet

WordNet och TF-IDF / översättningsmetoder för parafrasering och korsspråklig återanvändning (PAN 2011; FIRE 2011–2012).

Detektering av AI-genererad text

Att skilja mänskligt från maskinellt författarskap — högsta ROC-AUC vid PAN 2026.

Kollegialt granskade publikationer

Bibliografi

  1. Developing a High-Resolution Universal Multi-Type N-Gram Plagiarism Detector. Palkovskii & Belov. PAN @ CLEF 2014 Working Notes. CEUR-WS Vol-1180 ↗
  2. Using Hybrid Similarity Methods for Plagiarism Detection. Palkovskii & Belov. PAN @ CLEF 2013. CEUR-WS Vol-1179 ↗
  3. Applying Specific Clusterization & Fingerprint Density Distribution with a Genetic Algorithm. Palkovskii & Belov. PAN @ CLEF 2012. CEUR-WS Vol-1178 ↗
  4. Using a TF-IDF Weight Ranking Model in CL!NSS. Palkovskii & Belov. FIRE 2012, ISI Kolkata. FIRE working notes ↗
  5. Using WordNet-Based Semantic Similarity Measurement in External Plagiarism Detection. Palkovskii & Belov. PAN @ CLEF 2011. CEUR-WS Vol-1177 ↗
  6. Exploring Fingerprinting as an External Plagiarism Detection Method. Palkovskii & Belov. PAN @ CLEF 2010. CEUR-WS Vol-1176 ↗
  7. "Counter Plagiarism Detection Software" & "Counter-Counter Plagiarism Detection" Methods. Palkovskii. PAN'09. CEUR-WS Vol-502 ↗
Om upphovsmannen
YP

Yurii Palkovskii

Forskare och huvudutvecklare · Zhytomyr State University, Institute of Foreign Philology · SkyLine LLC

Upphovsman till sju kollegialt granskade artiklar om plagiering och detektering av AI-genererad text i CLEF/CEUR-WS- och FIRE-proceedings, med resultat oberoende utvärderade av PAN:s organisationskommitté (Potthast, Stein, Rosso, Hagen m.fl.).

Varje placering och poäng på den här sidan är hämtad från det officiella tävlingsöversiktsartikeln eller resultattabellen som länkas intill — verifierbar oberoende av den här webbplatsen. Produkten i aktiv utveckling sedan 2007; aktuell version #2965.