Induk TikTok Umumkan Seed3D 1.0, Model AI Canggih yang Ubah Foto 2D Jadi 3D Realistis

- Induk perusahaan TikTok, ByteDance, resmi memperkenalkan Seed3D 1.0, model AI generatif terbaru yang mampu mengubah gambar dua dimensi (2D) menjadi aset tiga dimensi (3D) yang sangat realistis.

Model ini dibangun menggunakan arsitektur Diffusion Transformer multimodal, sistem yang menggabungkan kecerdasan visual dan bahasa untuk memahami bentuk serta struktur obyek di dalam gambar.

Pengguna cukup mengunggah gambar 2D dari obyek yang ingin dibuat versi 3D-nya. Setelah menganalisis gambar, Seed3D secara otomatis menghasilkan model 3D yang bisa langsung digunakan dalam simulasi fisika atau lingkungan digital.

Nantinya, Seed3D bakal membuat aset 3D realistis dengan geometri detail, tekstur yang konsisten, tekstur dan dimensi yang seperti aslinya, dan pencahayaan yang terlihat nyata dari berbagai sudut pandang.

Dalam uji coba internal, ByteDance mengeklaim Seed3D menghasilkan kualitas tekstur dan bentuk yang lebih akurat dibandingkan model sejenis, seperti Gaussian Splatting dan Hunyuan3D 2.1 milik Tencent, misalnya.

Seed3D diklaim mencapai hasil itu hanya dengan 1,5 miliar parameter. Jika benar, model AI aset 3D ini jauh lebih efisien daripada model kompetitor yang dua kali lebih besar.

Untuk dunia robotik dan simulasi

Berbeda dari model AI generatif yang fokus pada gambar atau video, Seed3D dibuat untuk dunia nyata yang butuh akurasi fisik.

Misalnya pelatihan robot, manufaktur, dan pengembangan digital twin (salinan digital dari sistem fisik).

Aset 3D hasil Seed3D sudah mendukung integrasi langsung dengan platform Nvidia Isaac Sim, salah satu standar industri untuk simulasi berbasis fisika.

Dengan ini, peneliti atau insinyur robotika bisa melatih robot mereka berinteraksi dengan objek virtual yang perilakunya menyerupai dunia nyata. Mulai dari dari gesekan permukaan, pantulan cahaya, hingga bentuk gerakannya.

ByteDance Ruang kantor ini dengan segala furniturnya dibuat pakai kemampuan scene generation 3D di model AI generatif Seed3D milik ByteDance.

Yang menarik, selain menghasilkan satu objek, Seed3D juga bisa membangun satu skenario utuh atau ByteDance menyebutnya sebagai "scene generation".

Misalnya, dari foto ruang kantor, AI ini bisa mengidentifikasi furnitur/obyek (meja, kursi, komputer, jendela, dispenser, karpet, dinding, dan sebagainya), jarak antar-obyek, lalu membangun ruangan 3D lengkap yang siap untuk simulasi.

Dalam gambar demonstrasi yang disertakan ByteDance, pengguna bisa melihat hasil skenario ruang kantor 3D itu secara 360 derajat alias dari semua sudut.

Semua aset 3D di dalamnya terlihat realistis, punya ukuran seperti di dunia nyata, dan bentuknya sempurna dan konsisten saat dilihat dari berbagai sisi.

Ini berkat sistem view-aligned texture, yang memastikan tekstur permukaan tetap realistis dan tidak berubah ketika dilihat dari berbagai arah kamera.

Dalam video demo lainnya, Seed3D bisa menampilkan suasana dapur dengan segala perabotannya, seperti jus kemasan dengan teks yang jelas, kue, buah-buahan, serta ada pula pot bunga dan gembor (alat siram tanaman).

Dalam video, ByteDance membuat simulasi seperti ada tangan robot yang mengambil jus kemasan dan menggeser posisi jus. Hasil aset 3D Seed3D ini juga menampilkan simulasi tangan robot menata dan menyiram bunga.

Video demonstrasi AI generatif untuk aset 3D bikinan ByteDance bisa dilihat selengkapnya lewat tautan berikut ini atau lewat video di bawah ini. 

Sayangnya, ByteDance belum membuka detail komersial Seed3D. Hingga kini, induk TikTok ini belum merinci soal lisensi, format ekspor (seperti glTF, USD, atau FBX), maupun harga penggunaannya.

Saat ini, perusahaan hanya menyediakan akses terbatas melalui cloud API untuk keperluan riset dan uji coba.

Analis industri menilai peluncuran Seed3D ini sebagai strategi jangka panjang ByteDance untuk memperluas portofolio di luar media sosial dan konten video, sebagaimana dihimpun KompasTekno dari Parameter.io.

Tag:  #induk #tiktok #umumkan #seed3d #model #canggih #yang #ubah #foto #jadi #realistis