Video wird geladen...
Video konnte nicht geladen werden
現在APIのみで利用できるMiniMaxH3 Regeneration、実際に使ってみたところ、これ待ち望んでいたものでした💡💡💡 ざっくり言えば動画を高解像化するものなのでアップスケーラーと何が違うの?と思うかも知れません。 とても重要な違いはリファレンスが入力できる点です。 MiniMaxH3 Regenerationは低解像の動画を作成した時のリファレンスをそのまま入力して再生成します。これは小顔の品質に絶大な効果があり、単なるアップスケーラーは崩れた顔を修復できないかできたとしても本来の顔と別人になることが多いのに対し、Regenerationではリファレンス通りの顔にアップスケールされます。 🎦動画の前半は顔の部分のアップの比較、後半は個別の結果を載せています ☑️480Pだと顔はかなり崩れていて、リップシンクがよくわからない部分もあります ☑️Topazでアップスケールをかけてもそのあたりの改善は見られません ☑️Regenerationではリファレンス通りの顔でリップシンクも正しく復元されています✨ ローカルで480Pを短時間で生成して思う存分試行錯誤したあとで、これと決まったクリップだけをRegenerationで高解像度化するというのは、時間的にもコスト的にも理想的なワークフローだと思います💡 MiniMax Design (H3) MiniMax (official)
28,509 Aufrufe • vor 3 Monaten •via X (Twitter)
7 Kommentare

Probably not that hard to do independently. I was just looking at adjacent logic last night. H3 has a built in upscaler. I'm not sure if it's a detail enhancing upscaler, it could be. Default state is that it upscales your image 2x from the starting point by default. Then, it renders the entire video at that resolution. So, upload 1k starting image, and it upscales to 2k before rendering. Then, at the end of the process, it downscales to the desired resolution. This is why h3 is so slow, but the problem is fixable if you're willing to fuck with the pipeline a little. Last night, I made a performance pass on it that gets rid of the upscaler, and downscales the video generation to the desired resolution at the starting point. But... if you wanted to... you could not do that; instead, putting in place a better upscaler, and running that over selected keyframes to get a result like this. You can tell by the distortions in both the Topaz and the Regenerate videos that they're not upscaling every frame. If I were going to make h3 do something like this, that's where I would start.

API仕様をみると768Pしか入力できないかように見えるかもしれませんが、実際はこの条件を満たしていれば480Pの動画でもそのまま受け付けてくれるようです。

ありそうでなかったリファレンスを使ってアップスケール‼️😳 地味にこれは凄いですね

そうなんです💡 まだあんまり認知されていない感じがするので、もっと広まればいいなぁと✨

MiniMax-H3 2K Billed per second $0.13 / second うわ 10秒位の動画は200円くらい必要ですね。。。 それだったらrtx 6000 proでそのまま1080p出力の方が安いです。(1080p 10sは約 80GB vram必要です。)

Very interesting—where exactly do you find this tool ?

@AlwaveNazca It’s provided as an API, so you’ll need to write your own code to use it (though it should be pretty easy if you ask an AI to help). You can find the API documentation here:
