การวิจัย AI ล่าสุดของ Nvidia จะช่วยให้สร้างวัตถุ 3 มิติจากภาพ 2 มิติได้ง่ายขึ้น

เป็นการวิจัยประเภทที่จะช่วยให้ Nvidia และบริษัทใหญ่อื่นๆ วางรากฐานสําหรับ metaverse ที่เข้าถึงได้ง่าย

Nvidia ในวันอังคารกําลังเปิดตัวงานวิจัยใหม่เกี่ยวกับการเรนเดอร์ 3 มิติ ซึ่งวันหนึ่งอาจช่วยให้ศิลปินกราฟิก สถาปนิก และผู้สร้างคนอื่นๆ สร้างโมเดล 3 มิติจากภาพ 2 มิติได้อย่างรวดเร็ว เป็นการวิจัยประเภทที่จะช่วยให้ Nvidia และบริษัทใหญ่อื่นๆ วางรากฐานสําหรับ metaverse ที่เข้าถึงได้ง่าย

การเรนเดอร์โลก 3 มิติเป็นความท้าทายทางเทคนิคที่ซับซ้อน เทคนิคหนึ่งที่เรียกว่าการเรนเดอร์ผกผันเกี่ยวข้องกับการสร้างฉาก 3 มิติขึ้นใหม่จากภาพ 2 มิติจํานวนหนึ่ง ใช้ AI เพื่อประมาณพฤติกรรมของแสงในโลกแห่ง ความเป็นจริง

Nvidia เพิ่งจัดแสดงผลงานเกี่ยวกับสนามการแผ่รังสีประสาท (NeRF) ซึ่งใช้ AI เพื่อเร่งกระบวนการแสดงผลผกผัน ข้อเสียของโมเดล NeRF คือพวกเขาทําให้คุณมีภาพที่คุณไม่สามารถแก้ไขได้ง่าย ๆ ซึ่งไม่ดีสําหรับนักออกแบบที่สร้างสิ่งใหม่ ๆ

การวิจัยใหม่ของ Nvidia แก้ไขปัญหานั้น ไปป์ไลน์ Nvidia 3D MoMa ใหม่สร้างภาพขึ้นใหม่ด้วยคุณสมบัติสามประการ ได้แก่ โมเดลตาข่าย 3 มิติ วัสดุ และแสง โมเดลตาข่าย 3 มิติสร้างขึ้นจากสามเหลี่ยม วัสดุเป็นพื้นผิว 2 มิติที่ซ้อนทับบนตาข่าย 3 มิติเหมือนผิวหนัง สุดท้าย 3D MoMa จะประเมินว่าฉากมีแสงสว่างอย่างไร

ผลิตภัณฑ์สําเร็จรูปเข้ากันได้โดยตรงกับเอ็นจิ้นกราฟิกและเครื่องมือสร้างแบบจําลองที่ครีเอเตอร์ใช้อยู่แล้ว ซึ่งหมายความว่าครีเอเตอร์สามารถปรับเปลี่ยนและทดลองกับโมเดลของตนได้ 

Nvidia กําลังนําเสนอไปป์ไลน์การเรนเดอร์ผกผันในสัปดาห์นี้ที่การประชุมเกี่ยวกับคอมพิวเตอร์วิทัศน์และการจดจํารูปแบบในนิวออร์ลีนส์ ทีมวิจัยและครีเอทีฟของ Nvidia ได้สร้างแบบจําลอง 3 มิติของเครื่องดนตรีแจ๊ส พวกเขาเริ่มต้นด้วยภาพ 100 ภาพ แต่ละภาพจากห้าเครื่องดนตรีที่แตกต่างกัน หลังจากที่ 3D MoMa สร้างการแสดงตาข่าย 3 มิติของแต่ละฉาก ทีมงานก็นําโมเดลออกจากฉากดั้งเดิมและนําเข้าไปยังแพลตฟอร์มการจําลอง Nvidia Omniverse 3D เพื่อแก้ไข 

พวกเขาเปลี่ยนวัสดุบนเครื่องดนตรี โดยแทนที่พลาสติกเดิมของทรัมเป็ตด้วยวัสดุอื่นๆ เช่น ทองคําและไม้ จากนั้นพวกเขาก็แสดงให้เห็นว่าวัสดุต่างๆ สะท้อนแสงต่างกันอย่างไร