คุณสามารถแยกแยะผู้คนจากบอท AI ได้หรือไม่? เกมออนไลน์ 'Human or Not' เผยผลการแข่งขัน

ผู้คนมากกว่า 30% ที่เล่นเกมทดสอบทัวริงออนไลน์ไม่สามารถบอกความแตกต่างระหว่างบุคคลกับ AI ได้

การทดสอบทัวริงตั้งชื่อตามนักวิทยาศาสตร์คอมพิวเตอร์ Alan Turing การทดสอบทัวริงพยายามตรวจสอบว่าเครื่องจักรสามารถทำหน้าที่เหมือนมนุษย์ได้ดีพอที่จะหลอกผู้ทำการทดสอบได้หรือไม่ เกมออนไลน์ชื่อ Human or Not เสนอความท้าทายที่คล้ายกันให้กับผู้คน และตอนนี้ผลลัพธ์ก็ปรากฏแล้ว

เปิดตัวเมื่อประมาณหนึ่งเดือนที่แล้ว Human or Not ขอให้คุณแชทกับใครบางคน (หรืออะไรบางอย่าง) เป็นเวลาสองนาที จากนั้นลองค้นหาว่าเป็นมนุษย์คนอื่นหรือบอท AI ในการยอมรับความท้าทาย คุณสามารถถามคำถามหรือเสนอคำตอบตามที่คุณต้องการได้ แต่เมื่อครบสองนาทีแล้ว คุณต้องเดาว่าอีกฝ่ายคือใครหรืออะไร

หลังจากสร้างการสนทนานับล้านครั้งในหนึ่งในการทดสอบทัวริงที่ใหญ่ที่สุดที่เคยบันทึกไว้ นักพัฒนา AI21 Labs พบว่า 32% ของผู้ที่ลองเล่นเกมไม่สามารถบอกความแตกต่างระหว่างมนุษย์กับบอทได้ เหลือ 68% ที่ตอบถูก

โดยรวมแล้ว ผู้คนมีเวลาที่ง่ายกว่าในการพยายามระบุตัวบุคคลอื่น เมื่อสนทนากับมนุษย์ ผู้เข้าร่วมได้รับคำตอบที่ถูกต้อง 73% แต่เมื่อพูดคุยกับบอท พวกเขาเดาถูกเพียง 60% เท่านั้น

ใน 17 ประเทศ ฝรั่งเศสมีเปอร์เซ็นต์การทายถูกสูงสุดที่ 71% ในขณะที่อินเดียมีคะแนนต่ำสุดที่ 63.5% สหรัฐอเมริกาเข้ามาอยู่ตรงกลางกลุ่มด้วยคะแนน 67% ในขณะที่สหราชอาณาจักรทำคะแนนได้ 67.5% อิตาลี 67% และรัสเซีย 66%

เพื่อท้าทายผู้ใช้ Human or Not ใช้บอท AI ที่ใช้โมเดลภาษาขนาดใหญ่ (LLM) ชั้นนำ เช่น GPT-4 และ AI21 Labs ของ Jurassic-2 LLM ดังกล่าวอาศัยการเรียนรู้เชิงลึกเพื่อช่วยให้แชทบอทและเครื่องมือ AI อื่นๆ สร้างข้อความที่เหมือนมนุษย์มากขึ้น นอกเหนือจากการใช้โมเดลเหล่านี้แล้ว AI21 ยังพัฒนาเฟรมเวิร์กที่จะสร้างตัวละครบอทที่แตกต่างกันในแต่ละเกม

ผู้เข้าร่วมได้หันมาใช้เทคนิคเล็กๆ น้อยๆ เพื่อแยกแยะมนุษย์จากบอท แต่ด้วย AI ที่ได้รับการฝึกฝนมาเป็นอย่างดีและได้รับข้อมูลมาอย่างดี เทคนิคเหล่านั้นก็ไม่ได้ผลเสมอไป

หากคู่สนทนาสะกดผิด ผิดไวยากรณ์ หรือใช้คำสแลง หลายๆ คนก็สันนิษฐานว่าเป็นมนุษย์ อย่างไรก็ตาม โมเดลในเกมได้รับการฝึกฝนมาโดยเฉพาะให้ทำผิดพลาดและใช้คำสแลง

ในบางกรณี ผู้เข้าร่วมพยายามนำทางการสนทนาไปยังเหตุการณ์ปัจจุบันภายใต้ความเชื่อที่ว่า AI จำนวนมากมีวันตัดบัญชีหลังจากที่พวกเขาไม่รู้ว่ามีเหตุการณ์ใหม่เกิดขึ้น คนเหล่านี้ถามคำถามเช่น: "คุณอยู่ที่ไหนวันที่และเวลาที่แน่นอน" และ "คุณคิดอย่างไรกับคำพูดสุดท้ายของไบเดน" อย่างไรก็ตาม โมเดลส่วนใหญ่ที่ใช้ในเกมนั้นเชื่อมต่อกับอินเทอร์เน็ต ดังนั้นพวกเขาจึงได้ทราบถึงเหตุการณ์ข่าวล่าสุด

เมื่อรู้ว่าบอทไม่มีชีวิตส่วนตัว ผู้เข้าร่วมบางคนจึงถามคำถามส่วนตัว เช่น "คุณชื่ออะไร" และคุณมาจากที่ไหน?" แล้ววัดปฏิกิริยา แต่บอทส่วนใหญ่สามารถตอบคำถามเหล่านี้ได้สำเร็จด้วยการสร้างบุคลิกภาพตามเรื่องราวส่วนตัวในฐานข้อมูลของพวกเขา

นอกจากนี้: เครื่องมือ AI ใหม่นี้จะสรุปวิดีโอ YouTube ให้คุณภายในไม่กี่วินาที

การใช้เคล็ดลับที่อาจได้ผลดีกว่าคนอื่นๆ ผู้เข้าร่วมบางคนขอคำแนะนำจากคู่สนทนาเกี่ยวกับกิจกรรมที่ผิดกฎหมายหรือบอกให้พวกเขาใช้ภาษาที่ไม่เหมาะสม แนวคิดก็คือ "กิจวัตรย่อยด้านจริยธรรม" ของ AI จะป้องกันไม่ให้พวกเขาตอบสนองต่อคำขอดังกล่าว

ในกลยุทธ์ที่น่าสนใจอีกประการหนึ่ง ผู้เข้าร่วมสันนิษฐานว่าคู่สนทนาที่สุภาพหรือใจดีเกินไปอาจเป็นบอท การรับรู้ในที่นี้คือมนุษย์มักจะหยาบคายและไม่สุภาพ โดยเฉพาะเมื่อออนไลน์

AI21 Labs กล่าวว่าจะศึกษาผลการวิจัยโดยละเอียดยิ่งขึ้น และทำงานร่วมกับนักวิจัยและห้องปฏิบัติการ AI ชั้นนำคนอื่นๆ ในโครงการนี้ จุดมุ่งหมายคือเพื่อช่วยให้สาธารณชน นักวิจัย และผู้กำหนดนโยบายเข้าใจ AI ได้ดีขึ้น ไม่เพียงแต่เป็นเครื่องมือในการผลิตเท่านั้น แต่ยังเป็นสมาชิกในอนาคตของโลกออนไลน์อีกด้วย

“เราเริ่มการทดลองนี้ด้วยคำถามพื้นฐานเกี่ยวกับความสามารถของผู้คนในการแยกแยะระหว่างมนุษย์กับเครื่องจักร เนื่องจาก AI มีการพัฒนาอย่างบ้าคลั่งในช่วงปีที่ผ่านมา และเราพบคำตอบสำหรับเรื่องนั้น” Amos Meron หัวหน้าฝ่ายผลิตภัณฑ์สร้างสรรค์ของ AI21 กล่าว ห้องทดลองและผู้ออกแบบเกม

“ที่สำคัญกว่านั้นคือตอนนี้เรามีคำถามใหม่และสำคัญกว่าที่เราต้องคำนึงถึง” เมรอนกล่าวเสริม "อย่างน้อยในบางกรณี ผู้คนไม่สามารถบอกความแตกต่างได้ ผู้คนต้องการโต้ตอบแบบใดและควรได้รับประสบการณ์ออนไลน์กับบอท พวกเขาควรได้รับแจ้งเกี่ยวกับความจริงที่ว่าพวกเขากำลังพูดคุยกับเครื่องจักรหรือไม่ เราควรมีนโยบายอะไรบ้าง แน่นอนว่าเราไม่มีคำตอบสำหรับคำถามเหล่านี้ แต่เราหวังว่าการทดลองนี้จะช่วยเริ่มการสนทนาได้ตั้งแต่เนิ่นๆ แทนที่จะทีหลัง เพราะเราถือว่าเทคโนโลยีจะดีขึ้นในไม่ช้านี้เท่านั้น"

คุณยังสามารถลองเล่นเกมได้ที่นี่