เครื่องมือตรวจจับ AI ล้มเหลว เมื่อนักเรียนเอาชนะด้วยเทคนิคง่ายๆ

ทีมชุมชน BigGo
เครื่องมือตรวจจับ AI ล้มเหลว เมื่อนักเรียนเอาชนะด้วยเทคนิคง่ายๆ

โลกการศึกษากำลังเผชิญกับความจริงใหม่: เนื้อหาที่สร้างโดย AI กำลังตรวจจับได้ยากขึ้นเรื่อยๆ และเครื่องมือที่ออกแบบมาเพื่อจับผิดก็กำลังพิสูจน์ให้เห็นว่าไม่น่าเชื่อถือ เมื่อนักเรียนและนักเขียนค้นพบเทคนิคง่ายๆ ในการหลบเลี่ยงระบบตรวจจับ นักการศึกษาจึงเริ่มตั้งคำถามว่าการต่อสู้กับ AI ในการเขียนนั้นคุ้มค่าที่จะดำเนินต่อไปหรือไม่

วิทยาศาสตร์ที่ไม่น่าเชื่อถือของการตรวจจับ AI

เครื่องมือตรวจจับ AI ในปัจจุบันแสดงผลที่แตกต่างกันอย่างมาก โดยเนื้อหาเดียวกันอาจได้คะแนนความน่าจะเป็นที่ถูกสร้างโดย AI ตั้งแต่ 0% ไปจนถึง 80% ความไม่สม่ำเสมอนี้ทำให้เครื่องมือเหล่านี้ practically useless สำหรับการบังคับใช้ในแวดวงวิชาการ สมาชิกในชุมชนหนึ่งได้สาธิตเรื่องนี้โดยการทดสอบเนื้อหาผ่านแพลตฟอร์มตรวจจับหลายแห่ง ซึ่งเผยให้เห็นข้อบกพร่องพื้นฐานในการพึ่งพาระบบอัตโนมัติ ปัญหาไม่ได้เป็นเพียงด้านเทคนิคเท่านั้น แต่มันเกี่ยวกับธรรมชาติของรูปแบบภาษาที่ทั้งมนุษย์และ AI ใช้ร่วมกัน

ประเด็นสำคัญก็คือ คนจริงๆ ก็ใช้สำนวนเหล่านี้เช่นกัน เพียงแต่ในอัตราที่น้อยกว่า การตรวจจับไม่ใช่สิ่งที่กำลังจะแก้ปัญหาได้

เทคนิคง่ายๆ ที่เอาชนะการตรวจจับ

ผู้ใช้ค้นพบวิธีการหลบเลี่ยงการตรวจจับ AI ที่ตรงไปตรงมาอย่างน่าทึ่ง เพียงแค่เพิ่มวลีเช่น write this like a kinda dumb high school student ลงใน prompt ให้ AI ก็สามารถเปลี่ยนผลลัพธ์จากข้อความที่สร้างโดย AI อันแสนชัดเจน ให้กลายเป็นสิ่งที่มีเนื้อหาอ่านแล้วเหมือนงานเขียนของนักเรียนจริงๆ วิธีการที่ซับซ้อนมากขึ้นเกี่ยวข้องกับ humanizer tools ที่ใช้ reinforcement learning เพื่อฝึกโมเดล AI ให้ปรับปรุงข้อความโดยเฉพาะเพื่อหลีกเลี่ยงการตรวจจับ วิธีการเหล่านี้กำลังเข้าถึงได้ง่ายขึ้นเรื่อยๆ ทำให้เกมไล่จับแมวกับหนูเอียงไปในฝั่งของผู้ใช้ AI มากขึ้น

วิธีการหลบหลีกการตรวจจับ AI ที่พบบ่อย:

  • คำสั่งปรับเปลี่ยนสไตล์การเขียน (เช่น "เขียนแบบนักเรียนมัธยมปลาย")
  • เครื่องมือทำให้เป็นมนุษย์ที่ใช้การเรียนรู้แบบเสริมแรง
  • การแทนที่คำและปรับโครงสร้างประโยคด้วยตนเอง
  • การใช้โมเดล AI หลายตัวตามลำดับ

การคิดใหม่เกี่ยวกับวิธีการประเมินการศึกษา

นักการศึกษาและนักเทคโนโลยีหลายคนแย้งว่าทางออกไม่ได้อยู่ที่การตรวจจับที่ดีขึ้น แต่อยู่ที่การคิดใหม่เกี่ยวกับวิธีการประเมินผลตั้งแต่พื้นฐาน การอภิปรายได้เปลี่ยนไปสู่กลยุทธ์การประเมินทางเลือกที่มุ่งเน้นไปที่ความเข้าใจที่แสดงออกมา แทนที่จะเป็นเพียงผลลัพธ์การเขียนแต่เพียงอย่างเดียว ข้อเสนอแนะรวมถึงการนำเสนอปากเปล่า แบบทดสอบในชั้นเรียน งานเขียนด้วยลายมือ และโมเดล flipped classroom ที่เวลาในชั้นเรียนมุ่งเน้นไปที่การประยุกต์ใช้มากกว่าการสอน อย่างที่ผู้แสดงความคิดเห็นหนึ่งระบุไว้ การคงอยู่ของเรียงความแบบดั้งเดิมอาจบอกอะไรเกี่ยวกับความเฉื่อยชาของระบบการศึกษามากกว่าประสิทธิภาพของมันในฐานะเครื่องมือการเรียนรู้

วิธีการประเมินผลทางเลือกที่กำลังถูกหารือ:

  • การนำเสนอและการสอบด้วยวาจา
  • แบบทดสอบและการสอบในชั้นเรียน
  • การมอบหมายงานที่เขียนด้วยลายมือ
  • รูปแบบห้องเรียนกลับด้าน
  • การประเมินผลแบบเน้นโครงงาน

ต้นทุนของมนุษย์จากผลบวกลวง

แม้ว่าเทคโนโลยีการตรวจจับจะดีขึ้น แต่ความเสี่ยงของผลบวกลวงยังคงเป็นความกังวลที่สำคัญ การกล่าวหานักเรียนโดยผิดพลาดว่าใช้ AI ในขณะที่พวกเขาไม่ได้ใช้ อาจส่งผลกระทบร้ายแรงต่อเส้นทางวิชาการและสุขภาพจิตของพวกเขา ความเสี่ยงนี้ทำให้นักการศึกษาหลายคนลังเลที่จะพึ่งพาเครื่องมือตรวจจับ โดยเฉพาะเมื่อพิจารณาจากธรรมชาติที่ไม่น่าเชื่อถือในปัจจุบัน ผลกระทบด้านจริยธรรมจากการลงโทษนักเรียนที่บริสุทธิ์มีน้ำหนักมากกว่าผลประโยชน์จากการจับผู้โกงในหลายบริบททางการศึกษา

การสนทนาเกี่ยวกับการตรวจจับการเขียนโดย AI เผยให้เห็นความจริงที่กว้างกว่า: เทคโนโลยีได้แซงหน้าวิธีการประเมินผลการศึกษาของเราไปแล้ว แทนที่จะต่อสู้ในสงครามที่ไม่สามารถชนะได้กับเครื่องมือ AI ระบบการศึกษาอาจต้องปรับตัวให้เข้ากับความเป็นจริงใหม่ ที่งานเขียนมีวัตถุประสงค์ที่แตกต่างออกไปและต้องการแนวทางที่แตกต่างไปในการประเมินผล ทางออกสุดท้ายอาจไม่ใช่การตรวจจับที่ดีขึ้น แต่เป็นการสอนที่ดีต่างหาก

อ้างอิง: ARTIFICIAL WRITING AND AUTOMATED DETECTION