Daydream Tingkatkan AI Video Real-Time dengan Scope dan SDXL

Daydream Scope adalah toolkit open source yang dirancang untuk siapa pun untuk membangun atau bereksperimen dengan saluran video real-time model terbaru dunia. Alat ini memberikan antarmuka modular bagi pengembang untuk menyambungkan model inferensi, kontrol, dan remix serta menawarkan fleksibilitas yang diperlukan untuk mengeksplorasi teknik real-time yang sedang berkembang.

Eric Tang, salah satu pendiri Livepeer, perusahaan induk di belakang Daydream, menyatakan Scope sebagai sebuah pergeseran hal mendasar. "Ia memberikan ruang kerja yang dapat diperluas bagi teknolog kreatif dan pembangun untuk bereksperimen dengan saluran AI real-time," ujarnya. Baik untuk menguji model video generatif, membangun sistem produksi virtual, atau melakukan penelitian akademis, Scope dirancang sebagai wadah atau saluran bersama di mana inovasi dapat menyebar dengan cepat.

Scope saat ini masih dalam versi alpha yang ditujukan untuk komunitas, tetapi telah menyediakan dukungan untuk model-model seperti LongLive, StreamDiffusionV2, dan Krea Realtime 14B. Sementara model-model baru terus ditambahkan secara konsisten.

Hadirnya SDXL oleh Daydream membawa peningkatan substansial dalam hal kualitas dan kontrol. Dibangun di atas platform terbuka StreamDiffusion, SDXL menggabungkan berbagai benang merah hasil penelitian menjadi sebuah “stack” yang siap produksi. Hasilnya adalah generasi video berkualitas tinggi dengan latensi rendah yang dapat disetel dan dimanipulasi oleh para kreator secara real-time. Adapun kemampuan utama SDXL meliputi:

• Kontrol Gaya IPAdapter: mode standar yang memungkinkan transfer gaya artistik yang dinamis, sementara mode FaceID mempertahankan konsistensi karakter di seluruh frame.

• Presisi Multi-Control Net: dukungan untuk HED, Depth, Pose, Tile, dan Canny ControlNet yang memberikan akurasi spasial dan temporal yang memberi para kreator kendali tak tertandingi.

• Akselerasi TensorRT: inferensi yang dioptimalkan untuk NVIDIA meningkatkan kecepatan pemutaran hingga 15-25 FPS, bahkan dengan kombinasi model yang kompleks.

Bagi pengguna yang lebih memilih SD1.5, Daydream lantas tidak mengabaikan mereka. Perusahaan ini meghadirkan SD1.5 dengan IPAdapter yang dipercepat untuk menawarkan transfer gaya dengan frame rate tinggi dan peningkatan konsistensi kreatif.

Pendekatan ekosistem terbuka ini sudah membuahkan hasil sejak dini. Pengembang seperti DotSimulate, pencipta StreamDiffusionTD alat TouchDesigner, telah mulai memasukkan dukungan SDXL Daydream ke dalam aplikasi baru.

Integrasi awal ini memperkuat visi Daydream, sebuah “stack” AI video real-time yang menghubungkan model, kreator, dan infrastruktur dalam satu ekosistem yang koheren. Stack AI Daydream memungkinkan pembuatan konten video AI yang lebih kreatif dan dinamis. Kemampuan AI yang mutakhir ini dapat memenuhi tuntutan pasar atau permintaan global tentang pengalaman video real-time yang lebih cerdas.

Setelah Daydream tingkatkan AI video real-time dengan Scope dan SDXL, mereka menempatkan diri sebagai salah satu platform terbuka yang menawarkan kecepatan maupun transparansi. Dengan kehadiran Scope dan SDXL saat ini, perusahaan tersebut mempersiapkan panggung untuk gelombang kreativitas AI real-time berikutnya.