Loading video...

Video Failed to Load

Go Home

AnimateDiffに二枚の画像を入力して、ある程度狙い通りの動画を作れます ControlNet tileからの制御テンソルを最初と最後のフレームに限定して適用しています #aiart

TDS_95514874's profile picture

TDS

9,291 subscribers

295,992 views • 3 years ago •via X (Twitter)

Science & TechnologyArts#aiart
LIVE

Anya Rossi• Live Now

Private livecam show

0 Comments

No comments available

Comments from the original post will appear here

Related Videos

ControlNetのtileを使って動画を作るテストです 2つの画像をt2iで生成→シードを右上の物に固定し、右下の画像をtileモードで入力して適用度を上げていくと、右上から右下に向かって画像が徐々に変形していきます #aiart #stablediffusion
0:10

ControlNetのtileを使って動画を作るテストです 2つの画像をt2iで生成→シードを右上の物に固定し、右下の画像をtileモードで入力して適用度を上げていくと、右上から右下に向かって画像が徐々に変形していきます #aiart #stablediffusion

TDS

95,832 views • 3 years ago

個人的に #MiniMaxH3 はキャラクターシートをリファレンスさせてプロンプトで動作を制御するよりも、メインのフレームを用意してプロンプトでフレーム間の制御をしてあげるのが使いやすいと感じています☺️ OminiReferenceでも設定したフレームをすごい忠実に出してくれるので、ワンカット長尺も作りやすいのかなとも思ってます。（いつか試してみたい） ただその分画像生成の作業時間が増えます😇 MiniMax Design (H3)
0:15

個人的に #MiniMaxH3 はキャラクターシートをリファレンスさせてプロンプトで動作を制御するよりも、メインのフレームを用意してプロンプトでフレーム間の制御をしてあげるのが使いやすいと感じています☺️ OminiReferenceでも設定したフレームをすごい忠実に出してくれるので、ワンカット長尺も作りやすいのかなとも思ってます。（いつか試してみたい） ただその分画像生成の作業時間が増えます😇 MiniMax Design (H3)

Mankyu | AI動画生成

17,420 views • 3 months ago

Grok Imagineで新機能が追加されてましたね。 ２つあります。 1. 最後のフレーム指定とループ指定 一週間前くらいに導入されていたので今更です😅 Web版とiOSアプリでは使えて、Androidアプリではまだのようです。 今まではI2V（画像参照）のときに「最初のフレーム」と「参照」しかなかったのですが、そこに「最後のフレーム」「ループ」が加わりました。 「最後のフレーム」は渡した画像が最後に来るように動画を生成、「ループ」は渡した画像が最初と最後に来るよう、つまり動画を連続再生させるとずっと繋がって見える、というものです。 １つ目の画像がその設定画面、２つ目の動画が実際に作ってみた動画です。 もうひとつの新機能はリプ欄で。
0:10

Grok Imagineで新機能が追加されてましたね。 ２つあります。 1. 最後のフレーム指定とループ指定 一週間前くらいに導入されていたので今更です😅 Web版とiOSアプリでは使えて、Androidアプリではまだのようです。 今まではI2V（画像参照）のときに「最初のフレーム」と「参照」しかなかったのですが、そこに「最後のフレーム」「ループ」が加わりました。 「最後のフレーム」は渡した画像が最後に来るように動画を生成、「ループ」は渡した画像が最初と最後に来るよう、つまり動画を連続再生させるとずっと繋がって見える、というものです。 １つ目の画像がその設定画面、２つ目の動画が実際に作ってみた動画です。 もうひとつの新機能はリプ欄で。

AIconia | アイコニア

25,839 views • 1 month ago

こちらのソースコードをGitHubにあげました falのAPIキーとキャラ画像を設定することで利用可能です あと、やり取りした動画はアーカイブとして後から見れるようにもしてみました。良い感じのやり取りをまとめて『切り抜き動画』とかにしても面白いかも？
0:16

こちらのソースコードをGitHubにあげました falのAPIキーとキャラ画像を設定することで利用可能です あと、やり取りした動画はアーカイブとして後から見れるようにもしてみました。良い感じのやり取りをまとめて『切り抜き動画』とかにしても面白いかも？

shinshin86｜AITuber OnAir開発者｜AIキャラのミコをバズらせたい人

38,559 views • 2 months ago

sora2でオリキャラをキャラシートから自動でVチューバーにしたい時、プロンプトに「最初のフレームからすぐカットを変更する」入れると上手く行くな。 これ入れないとキャラシートのまま喋りだしてしまう。
0:10

sora2でオリキャラをキャラシートから自動でVチューバーにしたい時、プロンプトに「最初のフレームからすぐカットを変更する」入れると上手く行くな。 これ入れないとキャラシートのまま喋りだしてしまう。

野火 城@AI漫画

90,664 views • 1 year ago

動画の作り方について、ちょくちょく質問が来ますが、基本的にsoraでベースの動画を作って、その中の細かいシーンのキャプチャーを別の生成AI（画像⇒動画が出来るヤツ）で場面を膨らませる感じで動画素材を沢山作り、それを動画編集ツールで編集してます。soraのプロンプトでは「カットシーン多め」とすれば、色んな場面を出力してくれます。ヒロインの見た目の変化については、「派手なギャルファッションに着替える」「派手な化粧」とかでも結構いい感じに変わってくれます。 参考適度に、soraで出力したオリジナルの動画です。 これを色々弄って編集して前回の動画を作りました。
0:15

動画の作り方について、ちょくちょく質問が来ますが、基本的にsoraでベースの動画を作って、その中の細かいシーンのキャプチャーを別の生成AI（画像⇒動画が出来るヤツ）で場面を膨らませる感じで動画素材を沢山作り、それを動画編集ツールで編集してます。soraのプロンプトでは「カットシーン多め」とすれば、色んな場面を出力してくれます。ヒロインの見た目の変化については、「派手なギャルファッションに着替える」「派手な化粧」とかでも結構いい感じに変わってくれます。 参考適度に、soraで出力したオリジナルの動画です。 これを色々弄って編集して前回の動画を作りました。

TGN2G

14,019 views • 1 year ago

ついにおのものさんが手書きアニメのワークフローを、公開されました！！ 私は事前に教えていただいていて、ここ最近実験をしておりました。 その中で１つ見つけた？ことがあるので、シェアさせてください！ まず、リプ欄の画像絶対にみてくださいｗ ★添付動画を見ていただくと、線画が揺れ動いてるように見えるシーンがあるかなと思いますが、 これは ”一枚ごとに別の作画担当者がゼロから描き直したラフ原画をクリンナップせずにつないだ映像。この映像に同じ絵は二枚と存在しない。参照画像の線の荒れを下限とし、それより綺麗な線への清書を禁止する。動くほどさらに荒れる” という一文と、リプ欄にある画像を添付して作成しております。 興味がある方は試してみてください
0:15

ついにおのものさんが手書きアニメのワークフローを、公開されました！！ 私は事前に教えていただいていて、ここ最近実験をしておりました。 その中で１つ見つけた？ことがあるので、シェアさせてください！ まず、リプ欄の画像絶対にみてくださいｗ ★添付動画を見ていただくと、線画が揺れ動いてるように見えるシーンがあるかなと思いますが、 これは ”一枚ごとに別の作画担当者がゼロから描き直したラフ原画をクリンナップせずにつないだ映像。この映像に同じ絵は二枚と存在しない。参照画像の線の荒れを下限とし、それより綺麗な線への清書を禁止する。動くほどさらに荒れる” という一文と、リプ欄にある画像を添付して作成しております。 興味がある方は試してみてください

Roco @ AIアニメ

86,657 views • 3 months ago

ありがたいことに、KlingのCPPにも参加させていただくことになりました✨ 早速、KlingのモーションコントロールとV2Vを使用してショート動画を作ってみました！ モーションコントロールは参照動画の動きに合わせて画像のキャラクターを動かせます😄 V2Vはすでにある動画のキャラや服装、背景などを変更できる機能です！ 来週からまたいつも通り楽しく作って、なるべくこれまでよりもツールの良さが伝わるような投稿をしていきたいと思います🙇 Kling AI #klingai
0:13

ありがたいことに、KlingのCPPにも参加させていただくことになりました✨ 早速、KlingのモーションコントロールとV2Vを使用してショート動画を作ってみました！ モーションコントロールは参照動画の動きに合わせて画像のキャラクターを動かせます😄 V2Vはすでにある動画のキャラや服装、背景などを変更できる機能です！ 来週からまたいつも通り楽しく作って、なるべくこれまでよりもツールの良さが伝わるような投稿をしていきたいと思います🙇 Kling AI #klingai

Mankyu | AI動画生成

11,213 views • 9 months ago

このSystem Promptを改変して、画像を入れると自動で画像に合ったダンスのジャンルを決めて振付をしてくれるようにしてみました。 普通のダンス動画とあまり変わらないかなぁ😌 #capcut生成ai CapCut.Japan
0:15

このSystem Promptを改変して、画像を入れると自動で画像に合ったダンスのジャンルを決めて振付をしてくれるようにしてみました。 普通のダンス動画とあまり変わらないかなぁ😌 #capcut生成ai CapCut.Japan

AI Girl's Photo Studio

217,976 views • 6 months ago

【アニメ実写化動画の作り方】 使う媒体はたった2つ↓ ・chat GPT（配布致します） ・freepik これやれば5分後完成してます！ 📖4step📖 ①chat GPTで実写化したい アニメ画像を出してプロンプト抽出 ↓ ②freepikのnano bananaで画像生成 ↓ ③作った画像とどう動かしたいかをGPTsに送って動画用のプロンプトを作成 ↓ ④freepikのkling2.0に画像とプロンプトを 入れて動画化 分からない方はこのポストにいいねで 通知にnote届きます🔔
0:14

【アニメ実写化動画の作り方】 使う媒体はたった2つ↓ ・chat GPT（配布致します） ・freepik これやれば5分後完成してます！ 📖4step📖 ①chat GPTで実写化したい アニメ画像を出してプロンプト抽出 ↓ ②freepikのnano bananaで画像生成 ↓ ③作った画像とどう動かしたいかをGPTsに送って動画用のプロンプトを作成 ↓ ④freepikのkling2.0に画像とプロンプトを 入れて動画化 分からない方はこのポストにいいねで 通知にnote届きます🔔

ゆみ@AIクリエイター

121,461 views • 1 year ago

カメオがあんまり安定してないような･･･ 二人呼び出すと顔が混ざるのかな？ しかも縦動画を元にしたからなのか横動画を指定しても縦動画で生成されてしまう･･･🙄 #Sora2 #AIart
0:14

カメオがあんまり安定してないような･･･ 二人呼び出すと顔が混ざるのかな？ しかも縦動画を元にしたからなのか横動画を指定しても縦動画で生成されてしまう･･･🙄 #Sora2 #AIart

オムレツくん

35,844 views • 1 year ago

【Runway📢Update】中割り機能追加！Runway 「Gen3 Alpha Turbo」に中割りキーフレームが追加されました！ 今まで最初のフレームと最後のフレームを指定できていましたが、今回から中間フレームを指定できます。 これでAIアニメ制作もさらに現実的になってきたのではないでしょうか？😇 ちなみに既に実装されているツールもありましたが、Runwayの精度はどうでしょう…みなさんの実験も楽しみにしています！🙏 Prompt : blink, talk, #AI動画 #動画生成AI #runway #Gen3
0:14

【Runway📢Update】中割り機能追加！Runway 「Gen3 Alpha Turbo」に中割りキーフレームが追加されました！ 今まで最初のフレームと最後のフレームを指定できていましたが、今回から中間フレームを指定できます。 これでAIアニメ制作もさらに現実的になってきたのではないでしょうか？😇 ちなみに既に実装されているツールもありましたが、Runwayの精度はどうでしょう…みなさんの実験も楽しみにしています！🙏 Prompt : blink, talk, #AI動画 #動画生成AI #runway #Gen3

SEIIIRU😈動画生成AIを使う映像クリエイター

48,331 views • 1 year ago

普段から私の活動を見ているファンの方からのご依頼があって、その方のお掃除をしに行ったのですが…急にあるお願いをされてしまって…先程動画を公開しましたので詳しくはそちらからお願いします…
0:10

普段から私の活動を見ているファンの方からのご依頼があって、その方のお掃除をしに行ったのですが…急にあるお願いをされてしまって…先程動画を公開しましたので詳しくはそちらからお願いします…

家事代行サービス🛁🫧あかり

353,508 views • 1 year ago

AI動画初心者に朗報🦄 ✅プロンプトの基礎 ✅思い通りの動画が作れる63個のプロンプト をまとめたnotion欲しい人いますか？ これを知らないと、最初の一歩で無駄な遠回りをしてしまいます 欲しい人は、いいね と 「🦄」（ユニコーン）が含まれるリプを送ると、自動返信で受け取れます。
0:07

AI動画初心者に朗報🦄 ✅プロンプトの基礎 ✅思い通りの動画が作れる63個のプロンプト をまとめたnotion欲しい人いますか？ これを知らないと、最初の一歩で無駄な遠回りをしてしまいます 欲しい人は、いいね と 「🦄」（ユニコーン）が含まれるリプを送ると、自動返信で受け取れます。

ユニコ🦄 ClaudeCodeセミナーで16万人に教えた人🔥

43,266 views • 1 year ago

動画生成AIのRunwayを用いて縦型ダンス動画の作り方を解説したnoteを書きました。 以下のような画像と動画を作れます。左側の動画はプロンプトをそのまま使用した一発出しです。 問題があるとしたら記事がクソ長いことです。
0:10

動画生成AIのRunwayを用いて縦型ダンス動画の作り方を解説したnoteを書きました。 以下のような画像と動画を作れます。左側の動画はプロンプトをそのまま使用した一発出しです。 問題があるとしたら記事がクソ長いことです。

NOBU

382,345 views • 2 years ago

本日もNano Banana Proで画像を生成した画像を kling 3.0 Omni（Kling AI）で動画化しました✨ 生成した4枚の画像を以下のプロンプトで順番に切り替わるようにして動画化しています。 プロンプトは画像と動画生成で共通で使用しています！ これによって画像と動画のギャップが少なくなるのでおすすめですね。 個人的には4カットだと10秒くらいが丁度いいです。 今回も画像から動画プロンプトまでは Freepik のSpaces上でシームレスに生成しています。 多少突っ込みどころもあるかもしれませんが温かい目で見てもらえると嬉しいです☺ 【プロンプト（画像生成と動画共通）要約版】 柔らかな光に包まれた女性のシネマティックなクローズアップ。メイクブラシで肌を整え、丁寧にリップを塗った後、両手でそっと眼鏡をかけて照れくさそうに微笑む。準備を終えてカメラに小さく手を振り、首をかしげる愛らしい仕草が、美しいボケ味とともに滑らかにフェードアウトしていくエモーショナルな映像。
0:10

本日もNano Banana Proで画像を生成した画像を kling 3.0 Omni（Kling AI）で動画化しました✨ 生成した4枚の画像を以下のプロンプトで順番に切り替わるようにして動画化しています。 プロンプトは画像と動画生成で共通で使用しています！ これによって画像と動画のギャップが少なくなるのでおすすめですね。 個人的には4カットだと10秒くらいが丁度いいです。 今回も画像から動画プロンプトまでは Freepik のSpaces上でシームレスに生成しています。 多少突っ込みどころもあるかもしれませんが温かい目で見てもらえると嬉しいです☺ 【プロンプト（画像生成と動画共通）要約版】 柔らかな光に包まれた女性のシネマティックなクローズアップ。メイクブラシで肌を整え、丁寧にリップを塗った後、両手でそっと眼鏡をかけて照れくさそうに微笑む。準備を終えてカメラに小さく手を振り、首をかしげる愛らしい仕草が、美しいボケ味とともに滑らかにフェードアウトしていくエモーショナルな映像。

空想写真家

77,656 views • 7 months ago

💡 動画生成AIは余白で動きを決める 🎥 左右の動画を見比べてみましょう。 右のこぢんまりとした動きに対して、左のキャラは身体全体を使った動きをしてます。 実はこの二つの動画「同一プロンプト・同一素材」で生成してます。 なら違いは何か？左の素材画像に対して余白を追加しているのです。 余白の分だけ、キャラクターの動く余地が生まれます。同じプロンプトなのに、より大きい動きが可能になります。逆に動きが大きい場合は、対象キャラクターをフレームギリギリまで近づけることで動きを抑制できます。 もちろんプロンプトでも動きを調整できます。しかし、動きのポテンシャルは余白の有無で決まっているように感じるのです。 以下は優先度の仮説です 1. 動かすだけの余白があるか（フレームとキャラクターの比率=提供画像） 2. その中でどれだけ動かすか（プロンプト） 個人的にはかなり本質的な発見です。 最終的なショットと生成に相応しいショットが異なることを示すからです。このギャップを認識していないと、動画生成AIから十分な性能を引き出せないことになります。 あくまでも生成用にショットサイズを調整して出力、その結果を後でトリミング＆アップスケールで編集に回す、という工夫が必要かもしれません。 生成AIは実写やアニメと異なり、アクター/モデルとフレームの関係が逆転しています。フレームが先で、その中で初めて演技もキャラクターも生成されるのです。この違いを認識することが重要なのではないかと思いました。
0:10

💡 動画生成AIは余白で動きを決める 🎥 左右の動画を見比べてみましょう。 右のこぢんまりとした動きに対して、左のキャラは身体全体を使った動きをしてます。 実はこの二つの動画「同一プロンプト・同一素材」で生成してます。 なら違いは何か？左の素材画像に対して余白を追加しているのです。 余白の分だけ、キャラクターの動く余地が生まれます。同じプロンプトなのに、より大きい動きが可能になります。逆に動きが大きい場合は、対象キャラクターをフレームギリギリまで近づけることで動きを抑制できます。 もちろんプロンプトでも動きを調整できます。しかし、動きのポテンシャルは余白の有無で決まっているように感じるのです。 以下は優先度の仮説です 1. 動かすだけの余白があるか（フレームとキャラクターの比率=提供画像） 2. その中でどれだけ動かすか（プロンプト） 個人的にはかなり本質的な発見です。 最終的なショットと生成に相応しいショットが異なることを示すからです。このギャップを認識していないと、動画生成AIから十分な性能を引き出せないことになります。 あくまでも生成用にショットサイズを調整して出力、その結果を後でトリミング＆アップスケールで編集に回す、という工夫が必要かもしれません。 生成AIは実写やアニメと異なり、アクター/モデルとフレームの関係が逆転しています。フレームが先で、その中で初めて演技もキャラクターも生成されるのです。この違いを認識することが重要なのではないかと思いました。

NOBU

173,005 views • 2 years ago