Akselerator streaming optik Nvidia juga dapat menggunakan pembuatan bingkai AI untuk mengkodekan video

Sesuatu untuk dinanti: Banyak konsumen menantikan kartu grafis baru tahun ini untuk kemampuan bermain game mereka, tetapi mereka juga memperkenalkan alat pengkodean video baru. GPU Nvidia RTX 4000 menambahkan trik lain untuk menggandakan frame saat mengkodekan video.

Akselerator streaming optik di balik fitur baru DLSS 3 Nvidia tidak hanya akan meningkatkan bingkai video game. Pembuat konten juga dapat menggunakan teknologi untuk meningkatkan bingkai secara artifisial dalam video yang mereka enkode.

Sementara DLSS 2.0 menggunakan Tensor Cores di Nvidia RTX 2000 dan 3000 GPU untuk membuat piksel baru melalui pembelajaran mesin, DLSS 3 menggunakan akselerator aliran optik seri 4000 untuk membangun bingkai baru. Game PC yang mendukung DLSS 3 dapat menggandakan kecepatan bingkai serta peningkatan kinerja DLSS 2.0, tetapi teknologi Nvidia dapat memberikan peningkatan yang sama pada video.

Vektor gerak adalah salah satu alat yang digunakan DLSS untuk meningkatkan bingkai permainan, dan Nvidia juga menggunakannya dalam apa yang disebut konversi kecepatan bingkai berbantuan mesin (FRUC). Pada dasarnya, ini adalah bentuk interpolasi kinematik berbantuan perangkat keras. Konsepnya mirip dengan bagaimana TV menghaluskan dan menginterpolasi gerakan, tetapi inti CUDA RTX 4000 dan akselerator aliran optik membuat prosesnya lebih cepat dan lebih akurat. Ketika bingkai yang diinterpolasi mengandung artefak, teknik pengisian lubang bidang gambar dapat mengisinya untuk membuat gambar akhir yang akurat.

API perpustakaan FRUC mendukung format permukaan input ARGB dan NV12. Ini juga kompatibel dengan semua aplikasi DirectX dan CUDA.

Interpolasi kinetik yang ditingkatkan dapat membedakan Lovelace dari seri Arc Alchemist Intel dan GPU AMD RDNA3 karena ketiganya menawarkan pengkodean berbasis GPU AV1. Pengujian awal menunjukkan bahwa AV1 memiliki keunggulan signifikan dibandingkan H.264 dalam hal kecepatan, penggunaan data, dan kualitas gambar. Format baru ini memungkinkan pembuat konten dan pembuat konten untuk mengkodekan video HD secara lebih efisien. Tidak seperti H.265, AV1 juga bebas royalti.

Google juga mendorong codec AV1 karena formatnya menjadi semakin penting di YouTube. Perusahaan minggu ini merilis pembaruan signifikan untuk encoder AV1 open source – AOM-AV1 3.5 – yang sekarang mendukung encoding frame-paralel untuk lebih banyak utas. Bergantung pada resolusi video dan jumlah utas prosesor, pembaruan dapat mengurangi waktu penyandian antara 18 dan 34 persen.