Tagged: RTX Video Super Resolution

RTX Video HDR

SDR映像をHDR映像に変換。

ドライバレベルで対応

NVIDIAが1月24日にGeForce Game Readyドライバー及びNVIDIA Studioドライバーのバージョンを551.23へと引き上げた。
このバージョンになった事で得られる一番大きなトピックスは、何と言ってもRTX Video HDRである。
RTX Video HDRとは、SDR映像をHDR映像に変換する事ができる機能の事で、映像のダイナミックレンジを拡張する機能を言う。
簡単に言えば、映像をよりメリハリのある色合いに変換する機能、という言い方が出来るワケだが、実際に見た方がわかりやすいかもしれない。

この映像では、以前当Blogでも紹介したRTX Video Super Resolution(RTX VSR)も紹介されており、RTX VSRとRTX Video HDRを組み合わせて動画再生も可能である事を紹介している。

見て分かる通り、かなり違った印象になるだけでなく、実際に精細かつ色鮮やかに変わる事が見て取れるわけだが、実際に使ってみてここまでの効果が得られるかはまた別の話だと私は見ている。

ドライバの設定だけで使える？

一応、この機能はWindowsのシステムにおいてHDRをONにする事と、NVIDIAコントロールパネルのRTXビデオ拡張においてHDRを有効にする事で利用可能になる、としている。
ストリーミング映像であれば、Google ChromeやMicrosoft EdgeなどのChromiumベースのブラウザーで動作する、としているが、ではローカルの動画はどうかというと、そのままでは機能が有効にならない。
これはRTX VSRの時にも話題にしたが、動画プレーヤー側でRTX VSRやRTX Video HDRの機能を有効にする内部フィルタ内のビデオデコーダの設定とMPC Video Rendererをインストールしてその後DirectShowの設定を使う事で対応する事ができる。
これでローカルビデオデータもRTX VSRやRTX Video HDRを有効にして再生する事ができるので、できれば動画プレーヤーや>MPC Video Rendererを最新版にして、利用できるようにする事をお薦めしたい。
ただ、前述したようにどこまで効果があるかは動画ファイル次第だし、見た目にも感じ方一つで明暗が分かれるので、気休め程度と考える方が幸せかもしれない。

RTX VSRの負荷は結構高いかも

昨日インストールしてみたMPC VIDEO RENDERERだが、その効果はいかに？

インストールでコケる

昨日、RTX VSRをローカル保存された動画で使用出来るという事を知り、その記事を書いた。

Angel Halo

2023.05.11

RTX VSRをローカルで使う

https://blog.angel-halo.com/2023/05/rtx-vsrをローカルで使う

期待していた事が既に可能だったとは知らなかった…。ローカル動画の品質向上NVIDIAがドライバに持たせた超解像機能である「RTX Video Super Resolution」(通称RTX VSR)は、GeForce RTXシリーズに搭載されたTensorコアを使用した、動画再生品質向上機能である。主としては低解像度動画をスケールアップしたりする際に効果を発揮する機能だが、RTX VSRを搭載したドライバを公開した当初は、Microsoft Edge、Google Chromeのブラウザで再生するストリーミング動画に対して有効になる機能という事だった。本件は当Blogでも記事として書いた...

実際、この記事に書いた通りにインストールを進めたのだが、何故か「Install_MPCVR_64.cmd」を管理者で実行してもインストールに失敗し、コマンドライン上では「管理者で実行しろ」と言われて進めなかった。
私のWindows11の環境が悪いのかと、アカウントの見直しからいろいろと手を尽くしてみたが、解決できず、再度MPC VIDEO RENDERERのサイトを見ると、Release2という項目があったので、そこにある3月2日リリースのデータを見てみたら、インストーラーなど一部のデータのみ更新されているようで、こちらを使ってインストールを試みたところ、上手くインストールできた。
おそらく、初期リリースのアセットではPC環境によってインストーラに問題が出たのかもしれない。
とりあえず、Release2のインストーラでは上手くインストールできたので、実際にRTX VSRの効果を確認する事にした。

GPU負荷が40％を超える時も

設定は昨日の記事の通りで、GeForceのドライバ設定もMPC-BEの設定も済ませ、まずは低解像度品質の動画を再生してみる。
動画解像度は720×480のものを再生してみると、大凡20～30％の負荷がGPUにかかっているようで、これはアニメ調の動画だからこれぐらいの負荷で済んでいるのかも知れない。。

次に実写系の解像度720×480の動画をテストしてみるが、傾向としては似たようなものだが、面白いのは負荷がかかったり負荷が軽くなったりを繰り返す。

だが、今度は動画プレーヤーの窓をグッと広げ、画面の縦幅一杯に広げてみた。動画の表示解像度は2534×1426ドットになるが、これだとGPU負荷は一気に上がり、40％前後をずっと推移するようになる。
負荷に大きな乱れがなく、ずっと高負荷という状態が続き、GPU負荷35～45％という状態に張り付いた感じになった。
この状態の画質だが…おそらく人によって評価が割れるような気がする。
私個人としては、結構効果が出ている感じはしている。特に720×480ドットの元映像を2534×1426ドットの表示映像にしてみると判るのだが、細かい部分のディティールアップによってメリハリのある映像になっているような気がする。
比較画像に関しては他サイトで評価されているものを見てもらう方がわかりやすいと思うが、こういうのは映像として動いているもので見て評価したいところ。その感覚で言えば、私としては結構効果は出ているように思う。

RTX VSRをローカルで使う

期待していた事が既に可能だったとは知らなかった…。

ローカル動画の品質向上

NVIDIAがドライバに持たせた超解像機能である「RTX Video Super Resolution」(通称RTX VSR)は、GeForce RTXシリーズに搭載されたTensorコアを使用した、動画再生品質向上機能である。
主としては低解像度動画をスケールアップしたりする際に効果を発揮する機能だが、RTX VSRを搭載したドライバを公開した当初は、Microsoft Edge、Google Chromeのブラウザで再生するストリーミング動画に対して有効になる機能という事だった。
本件は当Blogでも記事として書いたが、その際、私はこの機能をローカルの動画プレーヤーで利用できたら良いのに…と書いた。

Angel Halo

2023.03.03

動画アップスケーリング

https://blog.angel-halo.com/2023/03/動画アップスケーリング

NVIDIAのRTX Video Super Resolutionはどうなのか？動画品質向上技術私がここ2世代分くらいのGPUをNVIDIAからAMDに変えたのは、動画再生支援機能であるFluid Motionがあったからだ。Fluid Motionは、秒間24フレームの動画を60フレームの動画に補完してくれたり、最近では72フレームの動画に補完してくれたりして、その動きを滑らかにしてくれる機能を与えてくれたのだが、残念ながら最新のRDNAアーキテクチャでは利用する事ができず、私が知る限りFluid Motionが利用できる最上位GPUはVegaアーキテクチャのRadeon VIIであった。だが、...

その後、VLCメディアプレーヤーがRTX VSRに対応したという情報が発信され、いよいよローカルでもRTX VSRが利用できる事が判明した。

Angel Halo

2023.04.17

AI活用の動画プレーヤー

https://blog.angel-halo.com/2023/04/ai活用の動画プレーヤー

Media Player Classic系のプレーヤーも対応してくれないかな…。VLCメディアプレーヤー私はあまり使う事がないプレーヤーソフトなのだが、フリーのメディア再生ソフトである「VLCメディアプレーヤー」が、NVIDIAのSEAforce RTX 30/40シリーズで利用可能なAIによるアップスケーリング技術「RTX Super Resolution」をサポートするテスト版を公開した。適用バージョンは「VLC 3.0.19 RTX Vetinari」になる。RTX Super Resolutionは、当Blogでも過去に紹介した事があるが、RTX 30/40シリーズで実現した低解像度動画をアップスケーリングする...

こうなると、他の動画プレーヤーでも使える様になれば良いのに、という希望はより現実的なものになっていくのだが、当然私がそれを作る事はできないので、いつか出来る様になることを祈りつつ待つという日が続いた。
私は知らなかった事だが、NVIDIAもこのTensorコアでの動画品質向上機能について、普及させたい思惑があったようで、メジャーな動画再生ソフトの開発元に対して、RTX VSRの導入を訴求していたようだ。
その結果が前述のVLCメディアプレーヤーの対応なのだが、MPC VIDEO RENDERも対応したようで、これで私が願っていた事が現実のものになったと言える。

MPC VIDEO RENDER

MPC VIDEO RENDERは、Media Player Classic系のDirectShow用ビデオレンダラーで、フリーかつオープンソースのレンダラーである。
なので、私がよく使っているMPC-BEという動画プレーヤーで、使用するレンダラーとしてMPC VIDEO RENDERを利用できるようにすれば、RTX VSRをMPC-BEで利用出来るようになる。
…言葉にすると妙に簡単な話だが、実際手順としてやる場合には、いくつか注意点がある。
それはMPC VIDEO RENDERはインストールしたいフォルダに入れてやらないと、プレーヤーソフトから呼び出せないという事。
インストール先が間違っていると、レンダラー設定として呼び出せないので、そこには厳重に注意が必要になる。
不慣れな人はまずここからコケる可能性があるので、注意されたし。

動画アップスケーリング

NVIDIAのRTX Video Super Resolutionはどうなのか？

動画品質向上技術

私がここ2世代分くらいのGPUをNVIDIAからAMDに変えたのは、動画再生支援機能であるFluid Motionがあったからだ。
Fluid Motionは、秒間24フレームの動画を60フレームの動画に補完してくれたり、最近では72フレームの動画に補完してくれたりして、その動きを滑らかにしてくれる機能を与えてくれたのだが、残念ながら最新のRDNAアーキテクチャでは利用する事ができず、私が知る限りFluid Motionが利用できる最上位GPUはVegaアーキテクチャのRadeon VIIであった。
だが、私の導入したモニタがG-Syncにしか対応しなかった事から、GPUを再びNVIDIAに戻すこととなり、動画再生支援技術から手を引くことになってしまった。
長い間、NVIDIAでもGPUをもっと広く使えばいいのに、と思っていたのだが、ここに来てNVIDIAが「RTX Video Super Resolution」という、おそらくはTensorコアなどを利用したAI活用の低解像度動画をアップスケーリングするドライバを公開した。
フレームレートを稼ぐ機能ではなく、あくまでも低解像度動画をアップスケーリングする技術なので、方向性は違うのだが、動画品質を向上させる機能としてNVIDIAも動いた事に喜びを禁じ得ない。

欠点はストリーミング動画のみという事

ただ、このRTX Video Super Resolutionにおいて、私がとても残念に思っているのは、利用出来る環境があくまでもブラウザを介したストリーミングビデオだという事。
Google Chrome、Microsoft Edgeなどのブラウザの上で再生する動画に対してのみ、この機能が使えるという事で、個人がアーカイブしている動画コンテンツや、DVD、Blu-rayディスクには使用する事ができない。
どうも、最近のブラウザは基本的なアップスケーリング技術を使用しているという事で、そこを置き換える形で機能するらしく、動画プレーヤーで使用できるようなフィ。ターとしての体裁は持っていないようである。
これ、もしフィルターという形で実現できたなら、DVDコンテンツのような低解像度動画でもフルHD動画として綺麗にアップコンバートできるので、とても有りがたい機能になるのだが、どうにかフィルター機能にならないものだろうか？