Key Takeaways
- Nvidia baru-baru ini memamerkan teknik yang mengubah foto 2D menjadi pemandangan 3D hanya dalam hitungan detik.
- Metode ini menggunakan daya komputer untuk memperkirakan perilaku cahaya di dunia nyata.
- Metaverse adalah salah satu area di mana adegan 3D sangat membantu karena dapat dilihat dari sudut pandang kamera apa pun.
Teknologi kecerdasan buatan (AI) baru dari Nvidia dapat segera mengubah foto 2D menjadi pemandangan 3D hanya dalam hitungan detik, membuat penciptaan ruang virtual imersif seperti metaverse sama sepelenya dengan pengolah kata.
Nvidia baru-baru ini mendemonstrasikan metode foto yang disebut Instant NeRF, yang menggunakan daya komputasi untuk memperkirakan perilaku cahaya di dunia nyata. Ini dapat mengubah foto lama Anda menjadi adegan video game, atau dapat digunakan untuk melatih robot dan mobil yang dapat mengemudi sendiri untuk memahami ukuran dan bentuk objek dunia nyata.
"Pencitraan 3D menghadirkan dunia transformasi baru," Oren Debbi, CEO Visionary.ai, perusahaan visi komputer yang menjalankan algoritme 3D pada platform Nvidia, mengatakan kepada Lifewire dalam wawancara email. "Menggunakan 3D, Anda meniru kedalaman dunia nyata ke dalam adegan dan membuat gambar tampak lebih hidup dan realistis. Selain AR/VR dan kamera industri, di mana 3D sangat umum, kita sekarang melihatnya digunakan di hampir setiap smartphone tanpa pengguna bahkan mengetahui."
Menambahkan Dimensi
Foto instan pertama, diambil 75 tahun yang lalu dengan kamera Polaroid, bertujuan untuk menangkap dunia 3D dalam gambar 2D dengan cepat. Sekarang, peneliti AI bekerja sebaliknya: mengubah kumpulan gambar diam menjadi adegan 3D digital dalam hitungan detik.
Dikenal sebagai rendering terbalik, proses ini menggunakan AI untuk memperkirakan bagaimana cahaya berperilaku di dunia nyata, memungkinkan para peneliti untuk merekonstruksi adegan 3D dari beberapa gambar 2D yang diambil pada sudut yang berbeda. Nvidia mengklaim telah mengembangkan pendekatan yang menyelesaikan tugas ini hampir seketika.
Nvidia menggunakan pendekatan ini dengan teknologi baru yang disebut medan pancaran saraf, atau NeRF. Perusahaan mengatakan hasilnya, dijuluki Instant NeRF, adalah teknik NeRF tercepat hingga saat ini. Model hanya membutuhkan beberapa detik untuk melatih beberapa lusin foto dan kemudian dapat merender adegan 3D yang dihasilkan dalam waktu puluhan milidetik.
"Jika representasi 3D tradisional seperti jaring poligonal mirip dengan gambar vektor, NeRF seperti gambar bitmap: mereka menangkap secara padat cara cahaya memancar dari suatu objek atau di dalam pemandangan," David Luebke, wakil presiden untuk penelitian grafis di Nvidia, mengatakan dalam rilis berita. “Dalam hal itu, Instant NeRF bisa menjadi sama pentingnya dengan kamera digital dan kompresi JPEG untuk fotografi 2D-sangat meningkatkan kecepatan, kemudahan dan jangkauan pengambilan dan berbagi 3D.”
Mengumpulkan data untuk memberi makan NeRF memerlukan jaringan saraf untuk menangkap beberapa lusin gambar yang diambil dari berbagai posisi di sekitar adegan, serta posisi kamera dari setiap bidikan tersebut.
NeRF melatih jaringan saraf kecil untuk merekonstruksi pemandangan dengan memprediksi warna cahaya yang memancar ke segala arah, dari titik mana pun dalam ruang 3D.
Daya Tarik 3D
Metaverse adalah salah satu area di mana adegan 3D berguna karena dapat dilihat dari sudut pandang kamera apa pun, Brad Quinton, pendiri Platform Perceptus untuk augmented reality (AR), mengatakan kepada Lifewire dalam sebuah wawancara email. Sama seperti kita dapat berjalan melalui sebuah ruangan dalam kehidupan nyata dan melihat isinya dari berbagai sudut, dengan adegan 3D yang direkonstruksi, kita dapat secara virtual bergerak melalui ruang dan melihatnya dari sudut pandang apa pun.
"Ini bisa sangat berguna untuk menciptakan lingkungan yang digunakan dalam realitas virtual," kata Quinton.
Program seperti Apple's Object Capture menggunakan teknik yang disebut fotogrametri untuk membuat objek 3D virtual dari serangkaian gambar 2D. Model 3D akan digunakan secara luas dalam realitas virtual dan aplikasi AR, prediksi Quinton. Misalnya, beberapa AI, seperti yang ada di Platform AR Perceptus, menggunakan model 3D untuk menciptakan pemahaman tentang dunia nyata, yang memungkinkan aplikasi AR waktu nyata.
Penggunaan gambar 3D juga meniru kedalaman dunia nyata dalam sebuah adegan dan membuat gambar tampak lebih hidup dan realistis, kata Debbi. Untuk membuat efek Bokeh (alias mode potret atau mode sinematik), pemetaan kedalaman 3D diperlukan. Teknik ini digunakan di hampir semua smartphone.
"Ini sudah menjadi standar bagi videografer profesional yang merekam film, dan ini menjadi standar bagi setiap konsumen," tambah Debbi.
