Pada hari Jumat, peneliti dari NVIDIA mengumumkan Magic3D - model kecerdasan buatan yang dapat menghasilkan model 3D dari deskripsi tekstual. Setelah memasukkan petunjuk, seperti "Katak panah beracun biru duduk di atas teratai", Magic3D menghasilkan model jaring 40D lengkap dengan tekstur warna dalam waktu sekitar XNUMX menit. Dengan modifikasi, model yang dihasilkan dapat digunakan dalam video game atau adegan seni dalam format CGI.
Dalam artikel ilmiahnya NVIDIA melihat Magic3D sebagai respons terhadap DreamFusion, model text-to-3D yang diumumkan peneliti Google pada bulan September. Sama seperti DreamFusion yang menggunakan model teks-ke-gambar untuk membuat gambar 2D yang kemudian dioptimalkan menjadi data volumetrik NeRF (Neural radiance field), Magic3D menggunakan proses dua langkah yang mengambil model kasar yang dibuat pada resolusi rendah dan mengoptimalkannya untuk resolusi yang lebih tinggi. Menurut penulis artikel tersebut, metode Magic3D yang dihasilkan dapat menghasilkan objek tiga dimensi dua kali lebih cepat dari DreamFusion.
Magic3D juga dapat melakukan pengeditan jerat 3D secara langsung. Dengan model 3D beresolusi rendah dan tooltip dasar, Anda dapat mengubah teks untuk mengubah model yang dihasilkan. Magic3D juga mendemonstrasikan pelestarian plot yang sama selama beberapa generasi (konsep yang sering disebut koherensi) dan penerapan gaya gambar 2D (seperti lukisan kubisme) ke model 3D.
NVIDIA tidak merilis kode Magic3D apa pun dengan pekerjaan penelitiannya.
Kemampuan untuk menghasilkan 3D dari teks tampaknya merupakan evolusi alami dalam model difusi modern, yang menggunakan jaringan saraf untuk menyintesis konten baru setelah pelatihan intensif pada serangkaian data. Baru pada tahun 2022 kami melihat munculnya model teks-ke-gambar yang kuat seperti DALL-E dan Difusi Stabil, serta generator teks-ke-video yang belum sempurna dari Google dan Meta.
Adapun Magic3D, para peneliti di baliknya berharap itu akan memungkinkan siapa saja untuk membuat model 3D tanpa perlu pelatihan khusus. Setelah disempurnakan, teknologi yang dihasilkan dapat mempercepat pengembangan video game (dan realitas virtual), dan pada akhirnya dapat digunakan dalam efek khusus untuk film dan televisi. Di akhir artikel mereka, mereka menulis: "Kami berharap dengan Magic3D kami dapat mendemokratisasi sintesis 3D dan membuka potensi kreatif setiap orang dalam membuat konten 3D."
Anda dapat membantu Ukraina melawan penjajah Rusia. Cara terbaik untuk melakukannya adalah dengan menyumbangkan dana ke Angkatan Bersenjata Ukraina melalui selamatkan hidup atau melalui halaman resmi NBU.
Baca juga:
- Di Swedia, mereka belajar cara mencetak mikroelektronika pada printer 3D
- Debu dapat digunakan untuk pencetakan 3D di Mars