✨lllyasviel氏が作成したFramePackをComfyUIを使いkijai氏のWrapperで試したところ、5秒動画が使用メモリ6GBで8分、12GBで6分ほどで生成できました😊 FramePackはHunyuanVideoをベースにした次フレーム予測モデルで、低リソースでも高品質な動画生成が可能 ！これができるとなるとWan2.1でもできそうだしオープンソースも楽しくなってきた🥰 #AIVideo #FramePack

Gemini Omni 使ってみました。 普通に作ろうとしたらこんな提案してきた！ 一発で動画生成+右上のワイプを別で生成して重ねてきたってことなのかな。 テロップや合成などの編集込みで生成できるのは嬉しい。 使い方によってはまたワークフローが変わりそうですね！

最近話題のMiniMax H3を ローカル環境(RTX 4070)で試してみました 正直ローカルでの動画生成は 時間も掛かってクオリティが微妙 というイメージでしたが 有志の高速化のお陰もあって 0.4MPixelの5秒動画なら... ３分以内で出力できて クオリティもよかったです 1年前を考えると恐ろしい速さです それで1MPixel10秒で試したら 30分掛かりました さすがに厳しい😅 ということで この動画はChatGPTで生成した画像から 1MPixelで動画生成 アップスケールとフレーム補間をしたものです 0.5MPixel相当なら実用的な気がします😌show more

とっても簡単ですよ～ 1⃣Midjourneyで好きなショットを生成 2⃣MidjourneyのEdit機能で16:9に変更 3⃣②を元にnano-bananaでシチュエーションが分かるカットを生成 4⃣Kling AIで10秒生成 5⃣SUNOで音楽付けて軽い編集 このカットからどこまで作れるんかな～とお試し生成した動画ですが、線も絵も綺麗なのでちょっと伸びましたね

想像以上でした… 生成AIの"Sora2"がヤバすぎます。 スタイル抜群女子のダンスも完璧に生成できてしまうので これはインフルエンサーが完全終了です… ・美女動画の生成プロンプト付き ・最新動画生成AIの使い方 ・日本語にも対応済み この動画をたった5分で作るノウハウをまとめました。 有料note19,800円で販売しようと思ってたんですが、今だけ”無料”にしちゃいます。... Sora2を使いこなしたい人は いいねとリプで「スカイ」って送ってください👇show more

なぜか話題になってないけどAI Studioで「Veo2」が無料で使えるんです... ㅤ ・画像からの動画生成も可能 ・5,6,7,8秒から動画の長さを選択可能 ・かなり高品質な動画が30秒ほどで作られる ㅤ 実際に生成した動画3選をまとめました👇🧵

(※ChatGPT + 動画生成AI + 画像生成AI + AE) 【ご報告】 勇気を出して、憧れのとある制作チームに志願してみたところ、なんと快く受け入れてもらえました。... 今までマネタイズもせず、ただただAI動画の認知度を上げるためだけに投稿してきましたが、ようやく自分の活動ができそうです。 オンラインで面談をして頂き、まずはお試しで仕事をさせてもらう形になれたと思うので結果を出して正式に採用されたら報告ができるかもです。 一部の人は目にすることになるかもしれない期待のプロジェクトにさっそく参加させてもらえるようです。 練習を兼ねたいので、Xでの制作内容や投稿内容が少し変わるかもしれませんが、引き続きツール紹介などはかかさず投稿するつもりです。 フルコミットしだしたらXの投稿が遅れることもあるかもしれないですが、既に多くの方が同じようにツール紹介をしてくれているので引用やリポストも多様します。 これからも別の角度からAI動画を盛り上げる役割を果たすつもりですので、引き続き宜しくお願いします。 ※ ちなみにこの動画は、ChatGPT 4oでタイトルを作って、Runway Gen3で動かして、Midjourney V7で作ったイラスト合成して、AfterEffectsで編集した動画です。 こういう動画を含め、ソシャゲ系とかキャラ動作、フラットアニメ風とかも増えると思います。 今までは仕事が別だったのでＳＮＳは５０％くらいでしかやってませんでしたが、仕事の練習になるなら全力でできる機会も増えるので、おそらく投稿作品のクオリティーはあがります。 AI動画界隈の人達みんなの活動がいずれ、クリエイターとして仕事になるようにサポートできればいいなと思っていますので、これからは指標になれるような存在を目指します！ 応援してくれた方々に良い報告ができるよう頑張るぞ！ いつも見てくれてありがとう！！！🙏🙏🙏show more

MiniMaxDesignというデスクトップアプリが出たので色々お試し中です✨ ざっくりイメージとしてはMiniMaxに特化したCodexみたいな感じです☺️ しかもH3だけでなくKlingやSeedance2.5も使えます。 すごいなと思ったのは、「こういうふうな動画を作りたい」ということに対して結構的確に質問をしてくれるところです。 （この動画は背景だけ高速に流れる動画にしてと伝えたらできた動画です） もちろんSkillの設定もできますし、いろんなテンプレートも用意されているので初心者の方にもおすすめです✨ もう少し使い込んでみたいなと思います🙌 #MiniMaxH3 #MiniMaxDesign

💡 動画生成AIは余白で動きを決める 🎥 左右の動画を見比べてみましょう。 右のこぢんまりとした動きに対して、左のキャラは身体全体を使った動きをしてます。 実はこの二つの動画「同一プロンプト・同一素材」で生成してます。 なら違いは何か？左の素材画像に対して余白を追加しているのです。 余白の分だけ、キャラクターの動く余地が生まれます。同じプロンプトなのに、より大きい動きが可能になります。逆に動きが大きい場合は、対象キャラクターをフレームギリギリまで近づけることで動きを抑制できます。 もちろんプロンプトでも動きを調整できます。しかし、動きのポテンシャルは余白の有無で決まっているように感じるのです。... 以下は優先度の仮説です 1. 動かすだけの余白があるか（フレームとキャラクターの比率=提供画像） 2. その中でどれだけ動かすか（プロンプト） 個人的にはかなり本質的な発見です。 最終的なショットと生成に相応しいショットが異なることを示すからです。このギャップを認識していないと、動画生成AIから十分な性能を引き出せないことになります。 あくまでも生成用にショットサイズを調整して出力、その結果を後でトリミング＆アップスケールで編集に回す、という工夫が必要かもしれません。 生成AIは実写やアニメと異なり、アクター/モデルとフレームの関係が逆転しています。フレームが先で、その中で初めて演技もキャラクターも生成されるのです。この違いを認識することが重要なのではないかと思いました。show more

GPT-6 Astraで、Codex内に自分専用の「動画制作スタジオ」を作りました！ これまで、モデルごとのプロンプトの書き方や、脚本・絵コンテ・動画生成など、制作工程ごとにたくさんのスキルを作ってきました。 ✅ただ増えてくると「今これを使いたい」「前に作ったあのスキル、何だっけ？」と、自分でも把握しきれなくなる。 そこで、蓄積したスキルや制作ノウハウを、画面で見ながら選んで使える形にしました。 ・過去に作った短尺動画や、Xで見つけた作例・プロンプトを一覧化 ・アクション／アニメ／MV／モーショングラフィックなど、カテゴリー別に整理 ・「前に作ったこれ、いいな」を動画で確認し、そのままアレンジの出発点に ・モデルごとに整理したプロンプトや制作ルールを、Codexが参照... ・絵コンテから作るか、Reference to Videoで作るかなど、制作ルートも選べる ・長尺制作では、今どの工程で何を作っているのか、進み具合も画面で確認できる 裏側にあるのは、これまで自分で積み上げてきたスキル。 それを「思い出して呼び出す」だけじゃなく、作例や制作画面から使えるようにした感じです。 需要ありそうならzipで渡そうかな。とはいえ2〜3分くらいで作れるはず。show more

Image2『キャラクター設定一発生成！』 ストーリーアニメをつくるとき 一貫した基準を作る必要があります。 それがキャラクターシートですが、 使い道で違うシートが必要になったりします。 たとえば、 全身を写すときに三面図はベターですが、 目のアップなどは顔メインのシートのほうがいいとか👀 とはいえ、いちいち作るのも、、、... という方向けのノウハウです！ Image2ではこのように同時生成の画像でしたら テキストのみでも一貫性を保ってくれます。 複数回にわたる生成ですと、たまにとても細かいところの一貫性が保たれず、 その修正で時間をとられてしまうこともありますが、 同時生成ですとその時間も節約できます！ 試してみるのはいかがでしょうか✨show more

GPT-6 Astraで「一発でなんでもできた」みたいなツイートも多いですが、 実際にBlender操作を試してみると、私はこんな感じで工程を分けて進めました。 イメージ画像を作成 ↓ Tripoで3D化 ↓ Astraでモデル修正 ↓... リグ追加 ↓ アニメーション作成 もちろんAstraはかなり強力ですが、 「一発で完成」というより、人間が工程を組んでAIに作業してもらう感じでした。 動画はその結果です。show more

seedance2.0におけるベース演奏とBGMのシンクロ検証動画です。 seedance2.0でのライブ動画をよく拝見するので私も検証してみました。生成された音楽と左手の運指、右手の指引き、ヘッドバンギングが全て連動していて完成度高いです。ちゃんと音の高低に合わせた形でフレットを移動しているのも凄いですね…。ヘッドバンギングって動画生成でなかなか綺麗にできるものが無かったのですが、難なくクリアしました。 #capcut生成ai #capcutseedance2 CapCut.Japan CapCut

Pollo AIの新機能 Pollo Mimic を試してみましたー！ 用意したメイドギャル画像1枚と参考動画だけで動きを再現できる機能です。 実際に自分の画像を使って作ってみたら、かなり自然簡単に高品質なダンス動画が作れて便利でしたね！ 元の画像と作成した動画を添付するので見比べてみてください。

自分たちが今開発しているStreamDiffusionのデモを作成しました！ 動画は実画面のキャプチャです。 StreamDiffusionでは、好きなSDのモデルで動画のようにリアルタイムのtxt2imgができるようになる予定です。

AIでスポーツアニメ作る人は全員、Kling1.5Proのモーションブラシ使うべき（いる・・か・・？） Klingのモーションブラシ、複数のオブジェクトを意図する方向に動かせるんですが、その実力を発揮してもらおうとバスケさせてみました。 まずは試しにプロンプトで他の動画生成のやつで出力したものを。「ノールックパスして」と言ったんですが、なかなかカオスな状況になりがちでした。 満を持してモーションブラシを使ってみたら・・・成功！これはかなり良い！ちょっと３D化してるけど、Kling使う時は大体こうなると想定して作品をつくれば良いかなと。 #klingai

AIでゲーム生成してるので、 動画生成のほうができてないけど、たまには作ってみる。

NOBUさんのGemini Omniを使った手法が気になって仕方なかったので、ギター演奏でどのくらいの精度が出せるか試してみました🎸 これはいい、失敗をかなり減らせると思います！ 手順は引用元とほぼ同じです 1.演奏シーン撮影 2.Gemini Omniで運指とストロークをマネキン化 3.その動画と一緒に他素材をリファレンスさせてSeedance2.0で生成 再現度がかなり高いんじゃないでしょうか✨... ここで、実写なのにわざわざマネキン化を挟む必要があるのかという疑問があると思います。私も疑問です😅 リプ欄に今度のフェス用に、撮影素材をリファレンスさせて、直Kling3.0 Omni生成、直Seedance2.0生成した動画も載せていますが、プロンプトを改良しながらまぁまぁガチャして作りました。 一方で、マネキン化を挟んだものは一発でできました🙌まだこのケースしか試していないので、他の素材でも可能か、どのくらいカメラワークや画角変更が可能かなど、検証したい部分はたくさんありますが、かなり期待できる気がします。3D素体みたいな視認しやすいものを挟むことで、リファレンスする際にAIが動きだけに集中できるのかもしれません。 ちなみにGemini Omniで、撮影素材と他画像を参照させて直でできないか生成したものもリプ欄に載せておきます。Geminiは契約していなくて、マネキン化とこの実験で尽きてしまったので、他に試せていないですが、これは失敗しました。また実験したいと思います！show more