การวิจัยกราฟิกล่าสุดของ Nvidia นําภาพจาก 2D เป็น 3D เกือบจะในทันที

สามารถใช้ Instant NeRF เพื่อสร้างอวาตาร์หรือฉากสําหรับโลกเสมือนจริงเพื่อจับภาพผู้เข้าร่วมการประชุมทางวิดีโอและสภาพแวดล้อมในรูปแบบ 3 มิติหรือเพื่อสร้างฉากใหม่สําหรับแผนที่ดิจิทัล 3 มิติ

metaverse กําลังเป็นรูปเป็นร่างในขณะนี้ และ Nvidia ได้ทุ่มเทอย่างเต็มที่โดยแนะนําชุดเครื่องมือที่มีประสิทธิภาพในการสร้างมัน แต่แม้กระทั่งสําหรับผู้บุกเบิกด้านกราฟิกอย่าง Nvidia การเรนเดอร์โลก 3 มิติก็เป็นความท้าทาย ทางเทคนิคที่ซับซ้อน

ในการประชุมเทคโนโลยีกราฟิกฤดูใบไม้ผลิ (GTC) ในสัปดาห์นี้ Nvidia ได้สาธิตแนวทางใหม่ในการเรนเดอร์ผกผัน ซึ่งเป็นกระบวนการสร้างฉาก 3 มิติขึ้นใหม่จากภาพ 2 มิติจํานวนหนึ่ง การเรนเดอร์ผกผันใช้ AI เพื่อประมาณพฤติกรรมของแสงในโลกแห่งความเป็นจริง ด้วยแนวทางที่พัฒนาโดยทีมวิจัย Nvidia กระบวนการทั้งหมดจะเกิดขึ้นเกือบจะในทันที 

Nvidia อธิบายว่าวิธีการนี้สามารถนําไปใช้กับกรณีการใช้งานได้หลากหลาย สามารถใช้เพื่อสร้างอวาตาร์หรือฉากสําหรับโลกเสมือนจริง เพื่อจับภาพผู้เข้าร่วมการประชุมทางวิดีโอและสภาพแวดล้อมของพวกเขาในรูปแบบ 3 มิติ หรือเพื่อสร้างฉากใหม่สําหรับแผนที่ ดิจิทัล 3 มิติ

การใช้วิธีการแบบดั้งเดิมในการสร้างฉาก 3 มิติอาจใช้เวลาหลายชั่วโมงหรือนานกว่านั้น ขึ้นอยู่กับความซับซ้อนและความละเอียดของการแสดงภาพ เทคโนโลยีใหม่ยอดนิยมที่เรียกว่าสนามรังสีประสาท (NeRF) ใช้ AI เพื่อเร่งกระบวนการ NeRF ใช้โครงข่ายประสาทเทียมเพื่อแสดงและแสดงฉาก 3 มิติที่สมจริงตามคอลเลกชันอินพุตของภาพ 2 มิติ NeRF ฝึกโครงข่ายประสาทเทียมขนาดเล็กอย่างมีประสิทธิภาพเพื่อเติมเต็มช่องว่างโดยคาดการณ์สีของแสงที่แผ่รังสีไปในทิศทางใดก็ได้จากจุดใดก็ได้ในพื้นที่ 3 มิติ 

โมเดล NeRF รุ่นแรกๆ ได้สร้างการเรนเดอร์ที่มีคุณภาพในเวลาไม่กี่นาที แต่ต้องใช้เวลาหลายชั่วโมงในการฝึก Nvidia Research ได้พัฒนาสิ่งที่เรียกว่า Instant NeRF ซึ่งรวมการฝึกโครงข่ายประสาทเทียมที่รวดเร็วเข้ากับการเรนเดอร์ที่รวดเร็ว Nvidia กล่าวว่าเป็นเทคนิค NeRF ที่เร็วที่สุดจนถึงปัจจุบัน ซึ่งสามารถเร่งความเร็วได้มากกว่า 1,000 เท่าในบางกรณี 

ในการพัฒนา Instant NeRF Nvidia ได้คิดค้นวิธีการเข้ารหัสอินพุตใหม่ที่เรียกว่าการเข้ารหัสแฮชกริดแบบหลายความละเอียด ได้รับการปรับให้ทํางานอย่างมีประสิทธิภาพบน Nvidia GPU

"Instant NeRF อาจมีความสําคัญต่อ 3 มิติพอๆ กับกล้องดิจิทัล และการบีบอัด JPEG ก็เป็นการถ่ายภาพ 2 มิติ ซึ่งช่วยเพิ่มความเร็ว ความสะดวก และการเข้าถึงของการจับภาพและการแชร์ 3 มิติอย่างมาก" David Luebke รองประธานฝ่ายวิจัยกราฟิกของ Nvidia กล่าวในแถลงการณ์