พอตั้งเป้าที่การกดคะแนนให้ต่ำ งานเขียนจะพัง

หลังได้ผลตรวจมา มีเรื่องหนึ่งที่เกิดขึ้นบ่อย คือเริ่มแก้ประโยคเพื่อกดคะแนนให้ต่ำลง จงใจสลับรูปประโยค ปล่อยคำผิดทิ้งไว้ บิดประโยคให้แปลก ๆ

คะแนนลดลงจริง และงานก็แย่ลงจริง ปัญหาคือสองอย่างนี้เกิดขึ้นพร้อมกัน

ช่วงที่คะแนนกับคุณภาพงานสวนทางกัน

สิ่งที่เครื่องตรวจมองคือลักษณะทางสถิติของสำนวน ยิ่งคาดเดาง่ายน้อยและความแปรผันมาก ก็ยิ่งถูกจัดว่าเป็นงานที่คนเขียน

แต่ "งานที่คาดเดายาก" กับ "งานที่ดี" ไม่ใช่สิ่งเดียวกัน แค่ทับซ้อนกันเป็นช่วงกว้างเท่านั้น

การแก้	คะแนน	คุณภาพงาน
ใส่ประสบการณ์และข้อเท็จจริงที่เจาะจง	ลดลง	ดีขึ้น
ทำให้ความยาวประโยคหลากหลาย	ลดลง	ดีขึ้น
ตัดคำขยายที่ไม่จำเป็นออก	ลดลง	ดีขึ้น
จงใจปล่อยคำผิดไว้	ลดลง	แย่ลง
สลับรูปประโยคแบบสุ่ม	ลดลง	แย่ลง
บิดประโยคให้อ่านแล้วขัด	ลดลง	แย่ลงมาก
แทรกคำที่ไม่เกี่ยวข้องเข้าไป	ลดลง	แย่ลงมาก

สามแถวบนกับสี่แถวล่างแยกทางกัน ทั้งที่มุ่งไปเป้าเดียวกันแต่ผลตรงข้ามกันคนละทาง

จุดที่ขาดทุนจริง

เหตุผลที่การดัดแปลงเพื่อกดคะแนนอันตราย คือคนที่อ่านงานมีมากกว่าคนที่ดูคะแนนหลายเท่า

• จดหมายสมัครงาน: ประโยคที่อ่านแล้วขัดคือการเสียคะแนนในตัวมันเอง คนอ่านจดหมายมีมากกว่าคนที่เอาไปตรวจคะแนนเทียบกันไม่ได้
• วิทยานิพนธ์: ถ้าทำสำนวนวิชาการให้รก จะถูกทักในชั้นสอบ
• รายงาน: รายงานที่อ่านยากก็คือรายงานที่ไม่ดี เท่านั้นเอง
• เรียงความสมัครทุน: ประโยคแปลก ๆ ทำให้ผู้อ่านหยุดสะดุดในจุดที่ควรประทับใจ

เป็นการแลกไม่กี่เปอร์เซ็นต์ไปกับการประเมินจริง

ควรอ่านคะแนนอย่างไร

คะแนนความน่าจะเป็น AI คือสัญญาณ ไม่ใช่คำตัดสิน และสัญญาณบอกได้แค่ทิศทาง ขนาดของมันไม่ได้มีความหมายมากขนาดนั้น

เกณฑ์ที่ใช้ได้จริงมีดังนี้

ดูคะแนนรวมครั้งเดียวแล้วผ่านไป จะ 80% หรือ 40% ก็ไม่ได้บอกว่าต้องทำอะไรต่อ

เปิดดูเฉพาะช่วงที่ถูกไฮไลต์ การไฮไลต์รายประโยคคือข้อมูลที่ใช้ได้จริง

ถามคำถามเดียวกับประโยคที่ถูกไฮไลต์ ตรงนี้มีความคิดของเราหรือข้อเท็จจริงที่เจาะจงอยู่ไหม

• ไม่มี → เติมเข้าไป คะแนนก็ลดและงานก็ดีขึ้น
• มีแล้วแต่ยังติด → ปล่อยไว้ เพราะเป็นงานที่มีรูปแบบตายตัว หรือสำนวนของคุณเรียบร้อยอยู่แล้วตั้งแต่ต้น

ใช้เกณฑ์นี้แล้วคะแนนจะลดลงเองโดยที่ไม่ได้ตั้งคะแนนเป็นเป้า ลำดับสำคัญมาก

"แต่ถ้ายังติดอยู่ล่ะ"

เป็นความกังวลที่สมเหตุสมผล ขอบอกสองเรื่อง

หนึ่ง ไม่มีคะแนนไหนเป็นหลักฐานเดี่ยว ๆ ได้ ผลตรวจคือคะแนนความน่าจะเป็น AI ไว้อ้างอิง และระบุตัวผู้เขียนไม่ได้ ข้อเท็จจริงนี้ฝ่ายที่ตรวจสอบเองก็รับรู้มากขึ้นเรื่อย ๆ

สอง การตรวจสอบจริงส่วนใหญ่เกิดผ่านคำถามเรื่องเนื้อหา ถ้าตอบได้ว่า "ตรงนี้ทำไมถึงเขียนแบบนี้" เรื่องก็มักจบ และความสามารถในการตอบคำถามนี้ไม่ได้เพิ่มขึ้นเลยจากการนั่งกดคะแนน

ทิศทางของการเตรียมตัวจึงต่างกัน ไม่ใช่การบริหารคะแนน แต่คือการเก็บร่องรอยกระบวนการและทำให้ตัวเองอธิบายเนื้อหาได้ วิธีโดยละเอียดเขียนไว้ที่ถูกกล่าวหาว่าใช้ AI เขียน ควรชี้แจงอย่างไร

ตำแหน่งที่ถูกต้องของเครื่องมือ

เครื่องตรวจจับ AIคือเครื่องมือตรวจทานก่อนส่ง ไม่ใช่เครื่องมือทำนายว่าจะผ่านหรือไม่ผ่าน ถ้าใช้แบบหลังจะเพี้ยนไปคนละทาง

เครื่องมือเกลาข้อความก็เหมือนกัน ถ้าใช้เป็นเครื่องกดคะแนนก็จะได้ประโยคที่อ่านแล้วขัด แต่ถ้าใช้เป็นตัวช่วยจัดจังหวะประโยคจะมีประโยชน์ อย่าส่งผลลัพธ์ที่ได้ไปทั้งอย่างนั้น อ่านทวนเองอีกรอบเสมอ

ส่วนสาเหตุที่งานซึ่งเขียนเองกลับได้คะแนนสูง เขียนไว้ที่เขียนเองแท้ ๆ แต่ผลบอกว่าเป็น AI ในกรณีส่วนใหญ่ คะแนนที่สูงไม่ใช่เรื่องที่ต้องดัดแปลง แต่เป็นเรื่องที่ต้องทำความเข้าใจ