Bagaimana Cara Kerja NVIDIA DLSS 5 dalam Game? Sekadar Gimik AI?

Sebelum DLSS 5 hadir, semua fitur DLSS fokus untuk membuat frame lebih banyak atau lebih bersih. Istilah yang biasa digunakan adalah Super Resolution, upscale gambar dari resolusi rendah ke tinggi. Teknologi Frame Generation dan Multi Frame Generation mereka ini tugasnya menyisipkan frame buatan AI di antara frame asli di dalam game untuk meningkatkan FPS. Ada juga teknologi Ray Reconstruction yang membersihkan noise dari ray tracing menggunakan AI untuk menggantikan peran denoiser manual. Sebelum ada DLSS, pengembang game harus melakukan hand-tuned (penyetelan manual) yang sangat rumit guna mencocokkan denoiser berbeda untuk tiap efek cahaya. Misalnya, 1 denoiser khusus untuk pantulan atau refleksi, 1 untuk bayangan, dan 1 untuk pencahayaan global.

Semua fitur itu sekarang diakomodasi DLSS 4.5. Namun, ini terpisah dari DLSS 5 karena versi terbaru punya pendekatan yang jauh berbeda. Ringkasnya, DLSS 4.5 meningkatkan performa dan kecepatan, sementara DLSS 5 hadir untuk menciptakan realisme visual yang ekstrem. NVIDIA bahkan menyebut DLSS 5 sebagai lapisan baru yang ditambahkan di atas rendering biasa. Ia bukan pengganti fitur-fitur lama DLSS 4.5 ke bawah.

NVIDIA merancang DLSS 5 berbasis teknologi Generative Neural Rendering (3D-Guided Neural Rendering). Meski teknologi ini memanfaatkan AI generatif pixel-space diffusion model untuk menggambar ulang detail pencahayaan dan material tingkat lanjut pada final frame, AI tidak bekerja secara mandiri dari nol. Bukan pula sekadar menjadi filter visual yang bekerja acak.

Game engine tetap bekerja seperti biasa pada tahap awal. Geometri, kamera, animasi, dan struktur adegan semuanya masih digambar lewat rendering konvensional layaknya sebelum DLSS 5 ada. Engine menghasilkan satu frame warna utuh lengkap dengan motion vector, yaitu data arah gerakan objek dari frame ke frame.

Nah, frame warna dan motion vector inilah yang jadi input untuk model AI DLSS 5 beraksi. NVIDIA menyebut, model ini dilatih pakai data visual dunia nyata dalam jumlah besar. Model ini tidak mulai proses kerja dari nol seperti generator gambar AI pada umumnya. Teknologinya dikunci ke frame asli yang sudah ada agar hasil akhirnya tetap sesuai dengan konten yang sudah dibuat pengembang.

Di titik ini, inti dari teknologi AI yang diusung DLSS 5 mulai bekerja. Model DLSS 5 mengenali elemen semantik di dalam adegan, seperti wajah, tangan, kulit, rambut, sampai sumber cahaya. Kemudian, teknologi ini menambahkan detail pencahayaan dan material yang umumnya terpotong karena keterbatasan waktu render. Misal, subsurface scattering di kulit, cahaya yang menembus dedaunan, atau bayangan yang jadi lebih halus di sekitar objek.

Mereka menyebut proses ini sebagai 3D-guided karena AI tetap mengacu kepada struktur 3D yang sudah dibuat game engine. Teknologi ini tidak membuat gambar baru secara bebas sehingga hasilnya tetap stabil dari frame ke frame. Ia tidak bertindak seperti model AI generatif biasa yang bisa berubah-ubah tiap kali diberi perintah. Proses ini dicap cukup ambisius oleh berbagai kalangan, bahkan oleh NVIDIA sendiri, karena AI yang ikut menggambar secara real-time dari proses mencapai sekitar 23 per 24 piksel.

Saat ini, proses 3D-Guided Neural Rendering masih eksklusif untuk NVIDIA GeForce RTX 50 Series. Alasannya cukup teknis. Ini karena fitur butuh Tensor Core generasi kelima yang cuma ada di arsitektur Blackwell, mulai dari RTX 5050 sampai RTX 5090, termasuk varian 5060 dan 5060 Ti. Sementara itu, GPU dari generasi RTX 20, 30, dan 40 baru bisa mencicipi fitur-fitur yang dibawa DLSS 4.5, seperti Super Resolution dan Ray Reconstruction, tetapi belum bisa menjalankan lapisan neural rendering terbaru.

DLSS 5 masih sangat baru. Sementara ini, hanya NBA 2K27 yang mendapat dukungan resmi. Daftar game yang kompatibel kemungkinan besar bakal bertambah seiring waktu mengikuti pola DLSS versi-versi sebelumnya.

DLSS 5 menunjukkan arah baru dari teknologi rendering NVIDIA. Menurutmu, inovasi ini tergolong relevan untuk meningkatkan pengalaman main game lebih realistis atau sekadar gimik AI dari salah satu produsen teknologi terbesar dunia?