フレーム補間とは？AI活用？おすすめのフレーム補間ソフトで動画を滑らかに

フレーム補間とは

なぜフレーム補間の必要がありますか？

フレーム補間ソフトおすすめ
- フレーム補間初心者～Potplayer(無料)
- フレーム補間中級者～DmitriRender(有料、無料体験可)とAMD Fluid Motion
- - 1.DmitriRender
  - 2.AMD Fluid Motion
- フレーム補間高級者～SVP４ Pro（ SmoothVideo Project）（有料）

最新のAI活用のフレーム補間技術
- Dain-App
- Rife-App
- 最新で最高のAIフレーム補間ソフト・DVDFab Smoother AI

AIフレーム補間技術のデメリット

まとめ

フレーム補間とは

フレーム補間（Frame Interpolator）は、またモーション補間ともいわれ、低いフレームレートで撮影された動画のフレームに新たなフレームを推定して作り出し高いフレームレートの映像を生成する技術です。 Frames per second（fps）は一秒間の動画で見せる画像のコマ数です。数値が高ければ動画が滑らかに、低いと動画がカクカクするようになります。
実は、人間の目にとっては30fpsほどの動画に違和感をほとんど感じません。通常の動画は24fpsです。

なぜフレーム補間の必要がありますか？

フレーム補間技術のメリットといえば何より滑らかさです。運転や回転、スポーツなど動きが早い動画を詳しく分析するなら、fpsが高いものがおすすめ。特にドライブレコーダー、通常30fpsです。逆に、友達とビデオでチャットする時、インターネット接続があまりよくないと、ビデオ画面がカクカクした経験があるでしょう。それは激しい動きが少ないから、防犯カメラやネットカメラは3～5fpsが多いからです。
フレーム補間技術を採用すればスポーツやスローモーション映像、手持ち花火、風になびく髪など肉眼では捉えにくい瞬間を印象的に表現することができます。

フレーム補間ソフトおすすめ

フレーム補間初心者～Potplayer(無料)

potplayerは初心者向けのframe補間ソフトです。最大の特徴はワンクリックでフレーム補間ができることです。
ダウンロードリンク：https://daumpotplayer.com/download/
potplayerは、無料で強い機能を持つのが特徴です。しかし、potplayerには、ワンクリックでフレームを倍にする機能があることを知っていますか？操作方法は次の通りです。
potplayerを開き⇒右クリック⇒映像≫映像処理≫映像処理の設定…⇒モーションぼかし

次はフレームを倍に補間後のフレームレートです。

potplayerの「モーションぼかし」機能は中間フレームを補間する機能です。欠点といえば、フレーム補間を倍にするしかできないことです。自由に設定することができません。細かい設定も無理です。

フレーム補間中級者～DmitriRender(有料、無料体験可)とAMD Fluid Motion

1.DmitriRender

DmitriRenderはフレーム補間ソフトとして自体の利点があります。GPUコンピューティングを採用して、AMD、NVIDIA、INTELのいずれかでもサポートし、CPUへの負荷も少なく、パソコン構成の需要もそれほど高くありません。また、使いやすい。
Dmitrirenderのダウンロードは公式サイトで行います。公式サイトにより、このフレーム補間ソフトに対応するプレーヤーはMPC-HCが一番いい。MPC-HCプレーヤーや各種グラフィックカードの最新ドライバーは公式サイトからダウンロードできます。しかし、実際操作してみると、potplayerでもフレーム補間を行えます。
公式サイト：http://www.dmitrirender.ru/

Dmitrirenderのインストールは公式サイトにも掲載されています。基本的には最初から最後まで「NEXT」を押せばいい。具体的には、ガイドに従って操作してください。

NVIDIAグラフィックカードを使う場合、最初スクリーンがグリーンになる可能性があるかもしれません。

その時は、ベータ版のパッチファイル（ダウンロードサイト：https://yadi.sk/d/qM2snDWU34fU8r）をダウンロードして、そのファイルを「User/user name/appdata/roaming/dmitrirender」に入れて、同じ名前のファイルを置き換えます。見つけない場合は、「dmitriRender.dat」ファイルを検索して置き換えます。

フレーム補間方法
potplayerを開き、右クリック⇒フィルター⇒フィルター設定⇒フィルター優先度⇒登録フィルターを追加⇒DmitriRenderにチェックを入れ⇒優先度で「優先」のチェックを入れ⇒「OK」を押す

動画を再生すると、フレーム補間機能を使えます。
注：DmitriRenderはMPC-HCプレーヤーとの交換性が一番いいため、potplayerでフレーム補間後再生できなくなる時もよくります。成功率は８０％ぐらいだと思います。フレーム補間の効果がPotplayerよりいい。また、DmitriRenderは有料なソフトウ��アでで３０日の無料体験期間を提供します。

2.AMD Fluid Motion

AMD Fluid Motionは24fps又は他のの動画フレームレートを60fpsまでに補間することができます。公式サイトの宣伝により、GCN1.1アーキテクチャグラフィックスカードとCyberlinkPowerDVD 14のみが連携して働きますが、Bluesky Frame Rate Converterを使えば、CyberlinkPowerDVD伊賀のプレーヤーでも利用できます。
事前準備
8.1以降のWindowsOS
GCNアーキテクチャのグラフィックカード
最新のAMDグラフィックスドライバーに更新する

次はフレーム補間のガイドです。
ドライバパネルを開き、「ビデオ」→「カスタマイズ」を選択し、AMD Fluid Motion Videoをオンにして、AMD SteadyVideoを閉じます。

次はhttps://bluesky-soft.com/BlueskyFRC.htmlにアクセスして最後までスクロールしてBluesky Frame Rate Converterをダウンロードします。

インストール後次のように、「Enable AFM Support」をクリックして、閉じたらパソコンを再起動します。

次はPotplayerでBluesky Frame Rate Converterを設定して追加します。設定方法はDmitriRenderがPotplayerでのと同じなので、ここで詳しく説明しないことにします。ただし、登録フィルターを追加をクリックしたらDmitriRenderの代わりにBluesky Frame Rate Converterにチェックを入れます。

フレーム補間高級者～SVP４ Pro（ SmoothVideo Project）（有料）

公式サイト：https://www.svp-team.com/ja/home/
各種グラフィックカードの最新ドライバーはDmitrirenderの公式サイトでダウンロード可能です。
対応OS:Windows 7/8/10、macOS 10.12+、Linux 64
SVP4はどんな動画でも60fps以上の動画に変換してくれるツールです。フレーム補間作業は好きな動画を再生するうちにリアルタイムで完成します。古いバージョンは無料、WindowsとMACバージョンはいずれも３０日の体験期間を提供します。最大の特徴は、豊富なオプションで柔軟なカスタマイズ性が抜群であることです。メリットは、特定のプレーヤーに拘らず、どんな動画再生ソフトでも利用できることです。

注：SVP4は動画再生ソフトではありません、ただMPC-HC、madVR、LAV Filters、Avisynth、ffdshow Decoder、Reclockなどのソフトと連携して動作し、プレグインみたいなツールです。

SVP４ Proにより、フレームレートを60/120/144+ fpsまで補間可能、VLCを含むほとんどのビデオプレーヤーで再生可能、HDR・BD3D / VRビデオに対応（一部の動画再生ソフトだけ）します。また、広告なしです。再生中変換しますがインターネット接続が必須です。
SVP４ Proのダウンロードは簡単です。上記の公式サイトから「ダウンロード」ボタンをクリックして.exeファイルがダウンロードされます。それをクリックしてガイドに従ってインストールすればいいです。

最新のAI活用のフレーム補間技術

実は、DainとRifeはいずれもAIフレーム補間技術用語、AI補完エンジンのことを言います。でも、DainとRifeエンジンが搭載されるAI活用のフレーム補間ツールといえば、「Dain-App」と「Rife-App」が有名です。いずれもGRisk製品です。

Dain-App

Dain-AppはAI活用のフレーム補間技術、動画の空間の深度を認識し、視聴者にDain-Appにより、どんな動画でもあたらにフレームを補間して、大きいフレートレートに達成することができます。動きの速い動作をもっとスムーズに見えます。
Dain-Appを使うには、NVIDIAのCUDA対応のGPUが必須となっています。今はhttps://grisk.itch.io/ページで$9.90 USDの価格で入手できます。
「Buy Nowを」クリックすると有料ダウンロードができます。無料版ならRead this内のGithub Releaseからダウンロードできます。
ダウンロードしたDain-AppファイルからDAINAPP.exeファイルをクリックします。するとこマント画面が表示されます。

そして「Input File」をクリックしてフレームを補間したい動画を導入します。「Output File」で出力ファイルの保存場所を選択します。

「Movie Mode」で実写映画や３d映画、又はカートゥーンアニメ動画を選択します。

もちろん、補間したいフレームの数を選択できます。

あとは他の設定もいろいろできます。設定が終わったら下部の「Render」を押して、コマンドページで自動的にレンダリングします。１００％になるまで待ちます。

これで完了です！

注：今はAI技術の応用はまだ初期段階なので、時間が予想以上かかるかもしれません。２０分ぐらいの動画にフレーム補間を行うと、何日間かかってもおかしくありません。

Rife-App

Rife-APPはDain-Appより25倍の高速で実行でき、Nvidiaカードは、アプリケーションの速度を上げることができ、またCPUで実行することもできます。スピードが遅いかもしれません。詳細はhttps://grisk.itch.io/rife-appで確認できます。$24.90 USDの価格で入手できます。WindowsOSしか対応しません。

AIフレーム補間技術のデメリット

AIフレーム補間技術の最大のデメリットは、フレーム補間でアニメ画面がおかしくなることです。例えば、ライトニング。そもそも稲妻が速く走る動きをフレーム補間で遅くなりおかしくなります。
また、下した手を挙げると、人間なら簡単にその動作軌跡を想像できますが、AIアルゴリズムで補間すればおかしくなる恐れがあります。
要するに、フレーム補間に時間がかかるし、人間の目には30fps以上の動画を見てもほとんど区別できないし、必要となるハイスペックも高いし、おまけにフレームを補間しても画質もほとんど変わらないため、AIフレーム補間技術にネガティブな見方を持つ人もいます。

まとめ

今の成果から見れば、伝統のフレーム補間ソフトはあまり効果がよくありません。そして、AIによるフレーム補間技術はまだまだですが、これから期待できると思います。世界初のコンピューターは性能上でも大きさでも今のパソコンと比較できないでしょう？でも今のコンピューター技術は全てあの時から受け継ぐものです。だからこれからAIフレーム補間に関する製品も多くなると思います。期待しましょう。