Video wird geladen...
Video konnte nicht geladen werden
「音と動きをビジュアライズ」 Opus 5.5×Blender×Python ■素材 ・人物:MiniMax H3 ・キービジュアル:Midjourney ・音楽:MiniMax Music 3.0 ■Blenderとコードでやらせたこと ・音が大きいほど、絵が立体になって手前に飛び出す ・速く動いた所ほど、粒になって浮く ・打った瞬間に時間が止まり、カメラだけが回り込む ・止まっている間、空間ごと色と照明が切り替わる ■わかったこと ・生成だけでは出ない絵も組み合わせるとできる ・やりすぎるとだめ ・映像の動きにも反応させたら、映像そのものが鳴っているように見えてきた ・飛び出す量は曲の音と、素材の動きに任せた 実験的な映像ではありますが、何かの表現に使えそうだなと思います。AIをより拡張できる方法を探っていきたいです。 音と動きの両方で絵が動くと、なんか面白いですね。
45,879 Aufrufe • vor 1 Tag •via X (Twitter)
24 Kommentare

cool!

Thank you! 🙏✨

音のダイナミクスを視覚化するアプローチは興味深いですね。MiniMax Musicで色々試しているのですが、パラメータ調整次第で動きが大きく変わるのが面白いです。

ありがとうございます!曲は1回生成したものをそのまま使って、映像の方を曲に合わせて組みました。同じ曲でも合わせ方で印象がかなり変わるのが面白いですね。

SunoやUdioで生成した音源を素材にするのはよくやっています。ただのBGMではなく、映像に合わせたアレンジで印象が大きく変わるのが面白いですよね。

そうなんですね!面白いですよね。音も映像の一部ですもんね😆🙌

MiniMax Music 3 をこちらでもローカルで試していて 60秒を指定しても31〜60秒でばらつきました。 映像の尺に合わせたい時、曲の長さはどう揃えていますか。 音の大きさで絵が飛び出す仕掛けだと 尺がずれた時の効き方も変わりそうで気になりました

曲は使いたい区間を切り出しています。曲を映像に合わせるのではなく、映像の方を曲の拍に合わせて組んだので、尺のばらつきは困りませんでした。

切り出しなんですね。うちのところでも 勝敗の場面用の曲は拍の整数倍で4〜6秒を 切り出す形にしていました。 映像の方を曲の拍に合わせて組むのは逆向きで 生成の尺がばらつく前提ならそちらの方が素直ですね

そうなんですよね、結構音楽の尺コントロールするの難しいなという印象です、、、!

牛啊,好炫酷。bro是怎么做到的

谢谢!素材是AI生成的,之后用Blender和Python加工。

音でここまで立体になるの、見てて脳バグる

synesthesia effect here is incredible

Thank you so much! I'm really glad the connection between sound and visuals came through! 🙏✨

音が大きいほど手前に飛び出す、は曲の音量をそのまま奥行きに渡しているんですか。速く動いた所ほど粒になる、の「速さ」はH3の映像のコマ間の差分から取っているのかも気になりました。打った瞬間に止めて回り込むのは太鼓と合っていますね

ありがとうございます!おおよそそのイメージなのですが、もっとかなり細かく分けて色々調整してる感じです。細かい所はまた別でまとめてみようかなと思ってます!太鼓と合っていると言ってもらえて嬉しいです。

ありがとうございます。もっと細かく分けて調整しているんですね。まとめが出たら読ませてください。生成した素材をあとから音と動きで組み直すやり方は、うちのガチャ演出でも参考にしたいです

Nice! Did you use the mcp for blender?

Thanks! No MCP this time — Opus 5.5 wrote Python scripts and ran Blender with them.

これはめちゃくちゃ痺れます!!!

ありがとうございます!!!😆😆🙌

音の大きさで絵が飛び出して、打った瞬間に時間が止まる演出が気持ちいいですね。『やりすぎるとだめ』に実感がこもってます

音が大きいほど絵が手前に飛び出して、打った瞬間に時間が止まる所、映像そのものが鳴っているように見えますね。 商品PVだと、ビートに合わせて商品だけが前に出る見せ方に使えそうだと感じました。 「やりすぎるとだめ」の線引きは、どこで判断されましたか?



