ChatGPT 'ไม่ได้สร้างสรรค์เป็นพิเศษ' และ 'ไม่มีอะไรปฏิวัติ' หัวหน้านักวิทยาศาสตร์ AI ของ Meta กล่าว

สาธารณชนมองว่า ChatGPT ของ OpenAI เป็นการปฏิวัติวงการ แต่มีการใช้เทคนิคเดียวกันและงานประเภทเดียวกันนี้กําลังเกิดขึ้นในห้องปฏิบัติการวิจัยหลายแห่ง

เหตุใดสาธารณชนจึงไม่เห็นโปรแกรมอย่าง ChatGPT จาก Meta หรือจาก Google "คําตอบคือ Google และ Meta ต่างก็สูญเสียไปมากมายจากการนําเสนอระบบที่สร้างสิ่งต่างๆขึ้นมา" Yann LeCun หัวหน้านักวิทยาศาสตร์ AI ของ Meta กล่าว

เมื่อเร็ว ๆ นี้มีหมึกหกเกี่ยวกับคํามั่นสัญญาอันยิ่งใหญ่ของโปรแกรม ChatGPT ของ OpenAI ในการสร้างคําพูดภาษาธรรมชาติเพื่อตอบสนองต่อคําแนะนําของมนุษย์ 

โปรแกรมนี้สร้างความสดใหม่และน่าสนใจให้กับหลาย ๆ คนที่ ChatGPT ต้องมีเอกลักษณ์เฉพาะตัวในจักรวาล

นักวิชาการด้าน AI ขอร้องให้แตกต่าง 

"ในแง่ของเทคนิคพื้นฐาน ChatGPT ไม่ได้เป็นนวัตกรรมใหม่เป็นพิเศษ" Yann LeCun หัวหน้านักวิทยาศาสตร์ AI ของ Meta กล่าวในการชุมนุมเล็กๆ ของสื่อมวลชนและผู้บริหารบน Zoom เมื่อสัปดาห์ที่ แล้ว

"มันไม่มีอะไรปฏิวัติ แม้ว่าจะเป็นวิธีที่สาธารณชนรับรู้ก็ตาม" LeCun กล่าว "มันเป็นเพียงนั้น คุณรู้ไหม มันประกอบเข้าด้วยกันอย่างดี มันทําได้ดี"

ระบบ AI ที่ขับเคลื่อนด้วยข้อมูลดังกล่าวถูกสร้างขึ้นในอดีตโดยหลายบริษัทและห้องปฏิบัติการวิจัย LeCun กล่าว แนวคิดของ OpenAI ที่อยู่ในประเภทงานเพียงอย่างเดียวนั้นไม่ถูกต้อง

"OpenAI ไม่ได้ก้าวหน้าเป็นพิเศษเมื่อเทียบกับห้องปฏิบัติการอื่นๆ เลย" LeCun กล่าว

"ไม่ใช่แค่ Google และ Meta เท่านั้น แต่ยังมีสตาร์ทอัพครึ่งโหลที่มีเทคโนโลยีที่คล้ายคลึงกันมาก" LeCun กล่าวเสริม "ฉันไม่อยากบอกว่ามันไม่ใช่วิทยาศาสตร์จรวด แต่มันถูกแบ่งปันจริงๆ ไม่มีความลับอยู่เบื้องหลัง ถ้าคุณต้องการ"

LeCun ตั้งข้อสังเกตถึงหลายวิธีที่ ChatGPT และโปรแกรมที่สร้างขึ้น GPT-3 ของ OpenAI ประกอบด้วยเทคโนโลยีหลายชิ้นที่พัฒนาขึ้นเป็นเวลาหลายปีโดยหลายฝ่าย 

"คุณต้องตระหนักว่า ChatGPT ใช้สถาปัตยกรรม Transformer ที่ได้รับการฝึกอบรมล่วงหน้าในลักษณะที่ดูแลตนเองนี้" LeCun สังเกต "การเรียนรู้ด้วยตนเองเป็นสิ่งที่ฉันสนับสนุนมาเป็นเวลานาน ก่อนที่ OpenAI จะมีอยู่จริง" 

"Transformers เป็นสิ่งประดิษฐ์ของ Google" LeCun กล่าว โดยอ้างถึงเน็ตประสาทเทียมภาษาที่เปิดตัวโดย Google ในปี 2017 ซึ่งได้กลายเป็นพื้นฐานสําหรับโปรแกรมภาษามากมาย รวมถึง GPT-3 

งานเกี่ยวกับโปรแกรมภาษาดังกล่าวย้อนกลับไปหลายทศวรรษ LeCun กล่าว

"โมเดลภาษาขนาดใหญ่ โมเดลภาษาเน็ตประสาทเทียมตัวแรก - ในขณะนั้น มันมีขนาดใหญ่ ตามมาตรฐานในปัจจุบัน มันเล็ก - โดย Yoshua Bengio เมื่อประมาณ 20 ปีที่แล้ว" LeCun กล่าว โดยอ้างถึงหัวหน้าสถาบัน MILA ของ AI ของแคนาดา งานของ Bengio เกี่ยวกับแนวคิดเรื่องความสนใจถูกหยิบขึ้นมาโดย Google สําหรับ Transformer และกลายเป็นองค์ประกอบสําคัญในโมเดลภาษา ทั้งหมด

นอกจากนี้ โปรแกรมของ OpenAI ยังใช้เทคนิคที่เรียกว่าการเรียนรู้แบบเสริมแรงผ่านข้อเสนอแนะของมนุษย์ ซึ่งทําให้ตัวแทนที่เป็นมนุษย์ช่วยจัดอันดับผลลัพธ์ของเครื่องเพื่อปรับปรุง เช่นเดียวกับ Page Rank ของ Google สําหรับเว็บ เขากล่าวว่า แนวทางนั้นไม่ได้บุกเบิกที่ OpenAI แต่ที่หน่วย DeepMind ของ Google

"ดังนั้นจึงมีประวัติทั้งหมดของเรื่องนี้ และสิ่งนี้ไม่ได้ออกมาจากสุญญากาศ" LeCun กล่าว ซึ่งหมายถึง ChatGPT

โปรแกรม ChatGPT เป็นกรณีของความก้าวหน้าทางวิทยาศาสตร์น้อยกว่าตัวอย่างของวิศวกรรมที่ดี LeCun กล่าว เขาเปรียบเทียบโปรแกรมนี้กับคอมพิวเตอร์ Watson ของ IBM ที่แข่งขันในปี 2011 ในเกมโชว์ Jeopardy! และยานพาหนะที่ขับเคลื่อนด้วยตัวเองของผู้ประกอบการ Sebastian Thrun ที่ชนะการแข่งขัน Grand Challenge ปี 2005 ของ DARPA เทคโนโลยีที่ได้รับรางวัลของ Thrun "ไม่ได้เป็นนวัตกรรมพิเศษในแง่ของวิทยาศาสตร์พื้นฐาน" LeCun กล่าว "มันถูกออกแบบมาอย่างดี"

"นั่นคือสิ่งที่ OpenAI ได้ทํา" เขากล่าว "ฉันจะไม่วิพากษ์วิจารณ์พวกเขาในเรื่องนั้น"

LeCun เป็นวิทยากรที่ได้รับเชิญเป็นเวลาหนึ่งชั่วโมงครึ่งที่จัดโดย Collective[i] Forecast ซึ่งเป็นชุดการสนทนาแบบโต้ตอบออนไลน์ที่จัดโดย Collective[i] ซึ่งเรียกตัวเองว่าเป็น "แพลตฟอร์ม AI ที่ออกแบบมาเพื่อเพิ่มประสิทธิภาพการขาย B2B"

LeCun กล่าวเกี่ยวกับ OpenAI เพื่อตอบคําถามระหว่างการประชุมสัมมนาโดย Cade Metz นักข่าวของ New York Times Metz ถามว่าทีม AI ของ Meta FAIR ซึ่ง LeCun สร้างขึ้นจะได้รับการระบุในใจของสาธารณชนด้วยความก้าวหน้าในแบบที่ OpenAI เป็นหรือไม่ 

"เราจะเห็นสิ่งนี้จาก Meta หรือไม่? ใช่ เราจะได้เห็นสิ่งนี้" LeCun ตอบ "และไม่ใช่แค่การสร้างข้อความ แต่ยังรวมถึงตัวช่วยในการสร้างสรรค์ด้วย" เขากล่าว รวมถึง "ศิลปะสร้างสรรค์" ซึ่งเขากล่าวว่า "ฉันคิดว่าจะเป็นเรื่องใหญ่"

เขาเสนอว่า Meta จะช่วยให้ธุรกิจขนาดเล็กโปรโมตตัวเองได้ด้วยการผลิตสื่อที่โปรโมตแบรนด์โดยอัตโนมัติ

"มีร้านค้าประมาณ 12 ล้านแห่งที่โฆษณาบน Facebook และส่วนใหญ่เป็นร้านแม่และป๊อป และพวกเขาไม่มีทรัพยากรในการออกแบบโฆษณาใหม่ที่ออกแบบมาอย่างดี" LeCun กล่าว "ดังนั้นสําหรับพวกเขา ศิลปะสร้างสรรค์สามารถช่วยได้มาก"

ในอีกจุดหนึ่งของการพูดคุย LeCun ตั้งข้อสังเกตว่า "คุณอาจถามคําถามว่า เหตุใดจึงไม่มีระบบที่คล้ายคลึงกันจาก Google และ Meta" โดยอ้างถึง ChatGPT อีกครั้ง

"และคําตอบก็คือ Google และ Meta ต่างก็สูญเสียอะไรมากมายจากการนําเสนอระบบที่สร้างสิ่งต่างๆขึ้นมา" LeCun กล่าวพร้อมเสียงหัวเราะ

LeCun เป็นผู้ชนะรางวัลทัวริงปี 2019 สําหรับผลงานด้านวิทยาการคอมพิวเตอร์ ซึ่งเทียบเท่ากับรางวัลโนเบลของคอมพิวเตอร์ พร้อมกับศาสตราจารย์ Bengio และมหาวิทยาลัยโตรอนโตของ MILA และ Geoffrey Hinton เพื่อนร่วมงานของ Google ทั้งสามช่วยบุกเบิกยุคการเรียนรู้เชิงลึกของ AI ในปัจจุบัน  

OpenAI ได้รับทุนสนับสนุนจาก Microsoft ซึ่งมีสิทธิ์เข้าถึงโค้ดที่ผลิตโดยสตาร์ทอัพโดยเฉพาะ และค่อยๆ รวมโปรแกรมเข้ากับข้อเสนอซอฟต์แวร์ต่างๆ รวมถึงบริการคลาวด์ Azure