นำทางไปด้านบน
บันทึกทางวิทยาศาสตร์

บันทึกผลการวัดประสิทธิภาพที่ตรวจสอบได้อย่างเป็นอิสระ ปี 2009 – 2026

Plagiarism Detector ไม่ใช่กล่องดำ เครื่องมือตรวจจับของมันได้เข้าร่วมการวัดมาตรฐานทางวิทยาศาสตร์หลักของสาขานี้ ซึ่งก็คือการแข่งขัน PAN และถูกตัดสินโดยคณะกรรมการนักวิชาการอิสระในการประเมินระดับนานาชาติเก้าครั้ง บันทึกทั้งหมดอยู่ด้านล่าง ทุกผลลัพธ์มีลิงก์ไปยังแหล่งที่มาอย่างเป็นทางการ

โดยสรุป ระหว่างปี 2009 ถึง 2014 เครื่องมือนี้ได้เข้าแข่งขันใน ทั้งหก การแข่งขันนานาชาติ PAN ประจำปีด้านการตรวจจับการลอกเลียนแบบ และในภารกิจข้ามภาษาสองภารกิจของ PAN@FIRE ในอินเดีย โดยชนะภารกิจ CL!NSS ภาษาอังกฤษ–ฮินดีในปี 2012 ในปี 2026 สายเดียวกันนี้ได้เข้าร่วมภารกิจ Voight-Kampff Generative AI Detection ของ PAN และบันทึก ROC-AUC สูงสุด (0.996) ในบรรดาระบบทั้งหมดในการประเมิน โดยอยู่ในอันดับที่ 3 จาก 34 ทีม ผลิตภัณฑ์นี้จำหน่ายต่อเนื่องมาตั้งแต่ปี 2007
บันทึกการแข่งขันทั้งหมด

เก้าการประเมิน ทุกผลลัพธ์มีแหล่งที่มา

ปีการแข่งขันสถานที่จัดงานภารกิจอันดับคะแนนแหล่งที่มา
2009การแข่งขันนานาชาติครั้งที่ 1 ด้านการตรวจจับการลอกเลียนแบบPAN @ SEPLN · San Sebastiánการตรวจจับจากแหล่งภายนอก4 / 100.3045ภาพรวม
2010การแข่งขันนานาชาติครั้งที่ 2 ด้านการตรวจจับการลอกเลียนแบบPAN @ CLEF · Paduaการตรวจจับจากแหล่งภายนอก8 / 180.5093ภาพรวม · บทความ
2011การแข่งขันนานาชาติครั้งที่ 3 ด้านการตรวจจับการลอกเลียนแบบPAN @ CLEF · Amsterdamภายนอก (การทดลอง WordNet)7 / 90.19ภาพรวม · บทความ
2011CL!TR — Cross-Language Indian Text Re-UsePAN@FIRE · IIT Bombay, Mumbaiการนำข้อความภาษาฮินดี↔อังกฤษมาใช้ซ้ำ4 (การทดสอบที่ดีที่สุด)F 0.603ลีดเดอร์บอร์ด · ภาพรวม
2012การแข่งขันนานาชาติครั้งที่ 4 ด้านการตรวจจับการลอกเลียนแบบPAN @ CLEF · Romeการจัดแนวข้อความ6 / 100.538ภาพรวม · บทความ
2012CL!NSS — Cross-Language Indian News Story Search 1STPAN@FIRE · ISI Kolkataการนำข้อความข่าวมาใช้ซ้ำ (en→hi)1 / 3NDCG@10 0.34ภาพรวม · บทความ
2013การแข่งขันนานาชาติครั้งที่ 5 ด้านการตรวจจับการลอกเลียนแบบPAN @ CLEF · Valenciaการจัดแนวข้อความ6 / 90.61523ภาพรวม · บทความ
2014การแข่งขันนานาชาติครั้งที่ 6 ด้านการตรวจจับการลอกเลียนแบบ 1ST*PAN @ CLEF · Sheffieldการจัดแนวข้อความ1 std · 3/100.868ภาพรวม · บทความ
2026Voight-Kampff Generative AI Detection TOP AUCPAN @ CLEF · Jenaข้อความมนุษย์เทียบกับ AI3 / 34ROC-AUC 0.996ลีดเดอร์บอร์ด

plagdet = คะแนนการตรวจจับการลอกเลียนแบบโดยรวมของ PAN (รวมความแม่นยำ การเรียกคืน และความละเอียด) NDCG@10 = คุณภาพการจัดอันดับ ROC-AUC = คุณภาพการจำแนกประเภทที่ไม่ขึ้นกับเกณฑ์ *2014: 1st on the standard test corpus, 3rd of 10 on the official ranking corpus. 2026: 3rd of 34 teams; highest ROC-AUC of any team or baseline.

จากห้องปฏิบัติการสู่ผลิตภัณฑ์

วิธีการที่คุณไว้วางใจ

การแข่งขันแต่ละครั้งได้บันทึกเทคนิคที่นำมาใช้ในเครื่องมือที่จำหน่ายอยู่ งานวิจัยและซอฟต์แวร์นี้มาจากสายเดียวกัน ไม่ใช่การอ้างสิทธิ์ทางการตลาด แต่เป็นวิธีการที่ได้รับการตีพิมพ์และผ่านการตรวจสอบโดยผู้เชี่ยวชาญ

การลายนิ้วมือด้วย N-gram

การตรวจจับตัวเลือกอย่างรวดเร็วสำหรับข้อความที่นำมาใช้ซ้ำ (PAN 2010, 2014)

การจัดแนวข้อความ

การจับคู่ข้อความต้นฉบับ↔ข้อความที่น่าสงสัยอย่างแม่นยำด้วยความแม่นยำสูง (PAN 2012–2014)

ความคล้ายคลึงเชิงความหมายและข้ามภาษา

WordNet และ TF-IDF / วิธีการแปลสำหรับการถอดความและการนำข้อความข้ามภาษามาใช้ซ้ำ (PAN 2011; FIRE 2011–2012)

การตรวจจับข้อความที่สร้างโดย AI

การแยกแยะการประพันธ์ของมนุษย์จากเครื่องจักร — ROC-AUC สูงสุดที่ PAN 2026

บทความที่ผ่านการตรวจสอบโดยผู้เชี่ยวชาญ

บรรณานุกรม

  1. Developing a High-Resolution Universal Multi-Type N-Gram Plagiarism Detector. Palkovskii & Belov. PAN @ CLEF 2014 Working Notes. CEUR-WS Vol-1180 ↗
  2. Using Hybrid Similarity Methods for Plagiarism Detection. Palkovskii & Belov. PAN @ CLEF 2013. CEUR-WS Vol-1179 ↗
  3. Applying Specific Clusterization & Fingerprint Density Distribution with a Genetic Algorithm. Palkovskii & Belov. PAN @ CLEF 2012. CEUR-WS Vol-1178 ↗
  4. Using a TF-IDF Weight Ranking Model in CL!NSS. Palkovskii & Belov. FIRE 2012, ISI Kolkata. FIRE working notes ↗
  5. Using WordNet-Based Semantic Similarity Measurement in External Plagiarism Detection. Palkovskii & Belov. PAN @ CLEF 2011. CEUR-WS Vol-1177 ↗
  6. Exploring Fingerprinting as an External Plagiarism Detection Method. Palkovskii & Belov. PAN @ CLEF 2010. CEUR-WS Vol-1176 ↗
  7. "Counter Plagiarism Detection Software" & "Counter-Counter Plagiarism Detection" Methods. Palkovskii. PAN'09. CEUR-WS Vol-502 ↗
เกี่ยวกับผู้เขียน
YP

Yurii Palkovskii

นักวิจัยและนักพัฒนาหลัก · Zhytomyr State University, Institute of Foreign Philology · SkyLine LLC

ผู้เขียนบทความที่ผ่านการตรวจสอบโดยผู้เชี่ยวชาญเจ็ดบทความด้านการลอกเลียนแบบและการตรวจจับข้อความที่สร้างโดย AI ในเอกสารการประชุม CLEF/CEUR-WS และ FIRE โดยมีผลลัพธ์ที่ได้รับการประเมินอย่างเป็นอิสระโดยคณะกรรมการจัดการแข่งขัน PAN (Potthast, Stein, Rosso, Hagen et al.)

ทุกอันดับและคะแนนในหน้านี้นำมาจากบทความภาพรวมการแข่งขันอย่างเป็นทางการหรือลีดเดอร์บอร์ดที่ลิงก์ไว้ข้างๆ ซึ่งสามารถตรวจสอบได้อย่างเป็นอิสระจากเว็บไซต์นี้ ผลิตภัณฑ์อยู่ในการพัฒนาอย่างต่อเนื่องตั้งแต่ปี 2007 บิลด์ปัจจุบัน #2965