どうやって改善するのか?
この映像の改善は、専門の研究所などが行ったわけではなく一般のYoutubeチャンネル「Dutchsteammachine」が実現しました。
彼はオープンソースのAI「Dain-App」を使って自宅パソコンでこの処理を実行したのだそうです。
「Dain-App」は動画内の空間の深度を認識して、滑らかな中間フレームを作成してくれます。
12FPSの映像を60FPSにする場合、1秒間に48の偽のフレームが必要になります。これは1つのコマとコマの間に4つの偽のフレームを生成することになります。
単純にフレームを増やしただけでは、音がズレていってしまうため、音響も素材映像と同期させる処理が必要になります。
Dutchsteammachineは、非常に強力な冷却ファンとハイエンドGPUを積んだPCで、暇なときにこの作業を行い、映像を作り上げました。
フレームを保管するAIの作業は5分の動画を改善するのに、6時間から最大で20時間かかるとのこと。
色々と細かなテクニックが必要になるとはいえ、今は自宅のパソコンでも古い歴史的動画の高品質化が実現できるというのは、驚きです。
Google ニュースを使えば、ナゾロジーの記事はもちろん国内外のニュースをまとめて見られて便利です。
ボタンからダウンロード後は、ぜひフォローよろしくおねがいします。