Amber Moment

100コイン/月以上支援すると見ることができます

今回は動画のフレーム補完です。 フレーム補完とは、既存の動画のフレームとフレームの間にフレームを追加する事でfpsを上げる事を言い、フレームが増える事で動きが滑らかになります。 動画生成時には低fpsで生成し時間とVRAMを節約、作品として公開する際にはフレーム補完で動きの滑らかな作品にできます。 ComfyUIのテンプレートの「ビデオツール」の中に「フレーム補完」がありますので、それを使えば簡単です。 画像１は、テンプレートを少し変更して、簡易化したワークフローです。 画像２は、フレーム補完部分のノードをサブグラフに纏めたものです。 全てComfyUI標準のノードです。 フレーム補完で大切な事は、「動画を作成」ノードでのfpsの指定です。 これを間違うと、音声と画像の同期が取れなく成ってしまいます。 これを補正するのが、「Int (Multiplier)」と「数式」ノードです。 「Int (Multiplier)」では、フレーム数を何倍にするのかの倍率を指定します。 ※16fpsを32fpsにする場合は 2 （入力値は整数のみ指定可能でした）。 「数式」では、元の fps と倍率を掛けて最終的な fps を算出します。 ※fps は浮動小数点なので、注意！ -------------------------------------------------------------------------------------------- 画像３は、動画のアップスケールの際に書いたフレーム補完ノードを使った例です。 基本的な使い方は、テンプレートの物と変わりません。 画像４は、フレーム補完部分のノードをサブグラフに纏めたものです。 今回使ったカスタムノード ・ComfyUI Nvidia VFX Nodes https://github.com/Comfy-Org/ComfyUI_Nvidia_VFX_Nodes 　RTXVideoFrameGeneration 画像３の茶色のノードです。 「RTXVideoFrameGeneration」の設定項目の詳細は、上記URLの説明を確認下さい。 基本は「multilier」を（テンプレートの倍率と同じ）設定するだけです。 -------------------------------------------------------------------------------------------- 画像５は、アップスケールとプレーム補完を連続で行う例です。 私の場合パラパライラストを作る関係で、アップスケール→フレーム補完の順番で行っています。 実際の順番は、処理時間、画像の綺麗さなどを加味し、環境に合わせて決めて下さい。

100コイン/月以上支援すると見ることができます

100コイン/月以上支援すると見ることができます

100コイン/月以上支援すると見ることができます

100コイン/月以上支援すると見ることができます

100コイン/月以上支援すると見ることができます

580コイン/月以上支援すると見ることができます

500コイン/月以上支援すると見ることができます

100コイン/月以上支援すると見ることができます

100コイン/月以上支援すると見ることができます

今回は、動画のアップスケール（拡大）です。 先に MiniMax H3で動画を生成しましたが、メモリーの関係で「メガピクセル」を大きく設定できない場合などに、動画の解像度を上げる為に行います。 イラストでも行いますよね。 今回使用したカスタムノードは ・ComfyUI Nvidia VFX Nodes URL： https://github.com/Comfy-Org/ComfyUI_Nvidia_VFX_Nodes 　RTXVideoSuperResolution です。 画像１の茶色のノードです。 名前の通り、NvidiaのRTXにのみ対応したノードです。 その他のノードはComfyUI標準のノードです。 フローの簡単な流れを説明します。 １．「ビデオを読み込む」ノードで、目的の動画を読み込みます。 ２．「ビデオコンポーネントの取得」ノードで、動画のフレーム毎の画像、音声、fpsなどの情報を取得します。 ３．「RTXVideoSuperResolution」ノードで、フレーム毎の画像をアップスケールします。 ４．「動画を作成」ノードで、アップスケールされた画像と音声を合成し、fpsに従って動画にします。 ５．「ビデオを保存」ノードで動画を保存します。 「RTXVideoSuperResolution」の設定項目の詳細は、上記URLの説明を確認して下さい。 基本的に「scale」で画像を何倍にするかだけ設定すれば大丈夫です。 因みに、ComfyUI Nvidia VFX Nodes にはフレーム補完、HDR化のノードもありますので、興味のある方はお試し下さい。

夜はこない？ Will night ever come back? * 下記楽曲のアートワークとして制作しました。 同名シリーズのイラストの元になった曲です。 自作曲をAIでアレンジ後、作編曲・ミックスして仕上げました。 Created as artwork for the music video below. This is the track that inspired the illustration series of the same name. I arranged my original composition with AI, then refined the composition, arrangement, and mix by hand. https://youtu.be/t8UMiPWwIp4 (Model) Midjourney V8.2 (Size) 5888 x 3296 pixels (Upscaler) unlimited waifu2x *2x / Backend: WebGPU / Model: swin_unet - photo / DeNoise: None / Tile: 640, Shuffle / Alpha Channel: Disable (Last Seed) 767899878 (i2i Count) 0 time (Manual Adjustment) Merge 3 variations, Handwritten, White balance, Sharpness Prompt: A slender succubus girl standing across from the single bed in a hotel bedroom, open the curtains with one hand and staring expressionlessly at the beautiful fragmental city’s distorted 16k transparent nightscape outside. An extremely dynamic tilted shot taken from just behind below the close-up face. Looking up at the tops of the skyscrapers towering outside the window. Dramatic contrast of backlighting and shadow created by chiaroscuro. Bare light bulbs hanging from night sky. tilted vertical stripe and window blinds background, exquisitely detailed kawaii modern cartoon style surrealistic photograph, drawn with delicate fine lines, bold tilted composition, carm colors and vibrant solid colorful dots, blunt bangs, coquettish, wing, tail, horn, half opened large eyes, wearing open back short-sleeved and short-legged cute pajamas, absurdres, highres --raw --s 120 --v 8.2 --p wnrrlfx --sref 1958468279::3 1256473810::2 2770257201::1 2303749492::1 637741383::2 3635554940::2 2374731863::3 3289275409::1 3304104388::1 298143307::3 3905775254::3 707737553::1 --sw 30 --ar 16:9 --sv 6 --hd --exp 10

100コイン/月以上支援すると見ることができます

100コイン/月以上支援すると見ることができます

500コイン/月以上支援すると見ることができます