Loading video...

Video Failed to Load

Go Home

Kling3.0【リアル×アニメ】作り方✍️ Kling 3.0 Omniのエレメントで、 リアルスタイルのキャラクターと、 アニメスタイルのキャラクターを登録。 背景や乗り物なども登録できると良い。 プロンプトで＠を使ってキャラクターを指定して、セリフや動作を状況説明と一緒に入力。 カスタム複数カットを使ってカット割りを秒数で指定してアングルを変えたり、セリフの間を作ったりすることも可。 Klingのエレメントに登録しておけば、キャラクターも場所も声も一貫性を保ったまま、次のシーンを何度も生成できて、Omniでキャラクター含め７枚まで参照ができるので、同時に複数人が登場することも可能。 画像生成に関しても、Kling画像3.0からアングル変更や合成など多様に対応しているので、実質KlingAIで全て完結できます。 画像生成でMidjourneyやNijijourneyを使ったり、HiggsfieldのChinemaStudioでカメラ代えたり、合成や修正にNanobananaProを経由したり、音声を生成してDomoAIでリップシンクを付けたり、SunoAIでBGM作ったり、ViduAIで効果音を生成して編集で付けたり、拘れば、まだまだクオリティーをあげれそうです。 Kling AI #KlingAI #AIアニメ

seiiiiiiiiiiru's profile picture

SEIIIRU😈動画生成AIを使う映像クリエイター

21,388 subscribers

51,552 views • 4 months ago •via X (Twitter)

Science & Technology
LIVE

Anya Rossi• Live Now

Private livecam show

0 Comments

No comments available

Comments from the original post will appear here

Related Videos

ありがたいことに、KlingのCPPにも参加させていただくことになりました✨ 早速、KlingのモーションコントロールとV2Vを使用してショート動画を作ってみました！ モーションコントロールは参照動画の動きに合わせて画像のキャラクターを動かせます😄 V2Vはすでにある動画のキャラや服装、背景などを変更できる機能です！ 来週からまたいつも通り楽しく作って、なるべくこれまでよりもツールの良さが伝わるような投稿をしていきたいと思います🙇 Kling AI #klingai
0:13

ありがたいことに、KlingのCPPにも参加させていただくことになりました✨ 早速、KlingのモーションコントロールとV2Vを使用してショート動画を作ってみました！ モーションコントロールは参照動画の動きに合わせて画像のキャラクターを動かせます😄 V2Vはすでにある動画のキャラや服装、背景などを変更できる機能です！ 来週からまたいつも通り楽しく作って、なるべくこれまでよりもツールの良さが伝わるような投稿をしていきたいと思います🙇 Kling AI #klingai

Mankyu | AI動画生成

11,213 views • 4 months ago

AIで生成した1枚の画像をもとに動画を制作。 描かれていない部分まで、動画生成AIが自然に補完してくれる。 Midjourney → KLING で作ったけど、KLINGの効果音生成もかなり自然。
0:16

AIで生成した1枚の画像をもとに動画を制作。 描かれていない部分まで、動画生成AIが自然に補完してくれる。 Midjourney → KLING で作ったけど、KLINGの効果音生成もかなり自然。

HAL2400 | AI Visual Creator

35,696 views • 7 months ago

AIでスポーツアニメ作る人は全員、Kling1.5Proのモーションブラシ使うべき（いる・・か・・？） Klingのモーションブラシ、複数のオブジェクトを意図する方向に動かせるんですが、その実力を発揮してもらおうとバスケさせてみました。 まずは試しにプロンプトで他の動画生成のやつで出力したものを。「ノールックパスして」と言ったんですが、なかなかカオスな状況になりがちでした。 満を持してモーションブラシを使ってみたら・・・成功！これはかなり良い！ちょっと３D化してるけど、Kling使う時は大体こうなると想定して作品をつくれば良いかなと。 #klingai
0:13

AIでスポーツアニメ作る人は全員、Kling1.5Proのモーションブラシ使うべき（いる・・か・・？） Klingのモーションブラシ、複数のオブジェクトを意図する方向に動かせるんですが、その実力を発揮してもらおうとバスケさせてみました。 まずは試しにプロンプトで他の動画生成のやつで出力したものを。「ノールックパスして」と言ったんですが、なかなかカオスな状況になりがちでした。 満を持してモーションブラシを使ってみたら・・・成功！これはかなり良い！ちょっと３D化してるけど、Kling使う時は大体こうなると想定して作品をつくれば良いかなと。 #klingai

yachimat - AI Short Anime

11,053 views • 1 year ago

Image2『キャラクター設定一発生成！』 ストーリーアニメをつくるとき 一貫した基準を作る必要があります。 それがキャラクターシートですが、 使い道で違うシートが必要になったりします。 たとえば、 全身を写すときに三面図はベターですが、 目のアップなどは顔メインのシートのほうがいいとか👀 とはいえ、いちいち作るのも、、、 という方向けのノウハウです！ Image2ではこのように同時生成の画像でしたら テキストのみでも一貫性を保ってくれます。 複数回にわたる生成ですと、たまにとても細かいところの一貫性が保たれず、 その修正で時間をとられてしまうこともありますが、 同時生成ですとその時間も節約できます！ 試してみるのはいかがでしょうか✨
0:18

Image2『キャラクター設定一発生成！』 ストーリーアニメをつくるとき 一貫した基準を作る必要があります。 それがキャラクターシートですが、 使い道で違うシートが必要になったりします。 たとえば、 全身を写すときに三面図はベターですが、 目のアップなどは顔メインのシートのほうがいいとか👀 とはいえ、いちいち作るのも、、、 という方向けのノウハウです！ Image2ではこのように同時生成の画像でしたら テキストのみでも一貫性を保ってくれます。 複数回にわたる生成ですと、たまにとても細かいところの一貫性が保たれず、 その修正で時間をとられてしまうこともありますが、 同時生成ですとその時間も節約できます！ 試してみるのはいかがでしょうか✨

FinishFish | AI Anime

22,485 views • 26 days ago

＜実写×アニメ×🏀のプロンプト＞ 今更ですがプロンプトの答え合わせをします！ #DreaminaCPP Dreamina AI 実写×アニメで動きの良いシーンを作る際 個人的に感じたコツは ✅参照画像は少ない方が良い ✅キャラクターシートではなく背景とキャラクター合成済みの1枚絵が良い ✅プロンプトに描画スタイルについて明記すること ✅入れて欲しい動きやカメラワークを短文で入れる このプロンプトの作り方をベースに、いろんなシーンを作ってみましたが結構良い動きができていたと思います。 プロンプトを作る時は基本AI頼り。 自分で調整できるように日本語で作ってもらっています。 一時公開されていたViduOmniVideoProでも同じプロンプトが効きました。 ただ、やはりAIなので当たり外れあります。 このプロンプトや設定を使ったからといって1発で良い動きがでるとは限りません。使用するキャクターや画像との相性も関係します。 この動画はこんな作り方していたのか。くらいの感じで参考にして頂ければ幸いです。 プロンプトはリプ欄に👇
0:15

＜実写×アニメ×🏀のプロンプト＞ 今更ですがプロンプトの答え合わせをします！ #DreaminaCPP Dreamina AI 実写×アニメで動きの良いシーンを作る際 個人的に感じたコツは ✅参照画像は少ない方が良い ✅キャラクターシートではなく背景とキャラクター合成済みの1枚絵が良い ✅プロンプトに描画スタイルについて明記すること ✅入れて欲しい動きやカメラワークを短文で入れる このプロンプトの作り方をベースに、いろんなシーンを作ってみましたが結構良い動きができていたと思います。 プロンプトを作る時は基本AI頼り。 自分で調整できるように日本語で作ってもらっています。 一時公開されていたViduOmniVideoProでも同じプロンプトが効きました。 ただ、やはりAIなので当たり外れあります。 このプロンプトや設定を使ったからといって1発で良い動きがでるとは限りません。使用するキャクターや画像との相性も関係します。 この動画はこんな作り方していたのか。くらいの感じで参考にして頂ければ幸いです。 プロンプトはリプ欄に👇

neco - AI Anime

39,688 views • 25 days ago

ギャルになりたい時もある🔥 そんな時はGAL ENERGY "GAL GAL" KLING Omniで小物を登録すると商品の一貫性保てるので商品紹介の動画とかは作りやすそうですね。 GrokImagine Qualityモードで画像生成してみましたが、顔の調整が難しいです。またかわいい子の生成のし方を見つけないと。 #Kling3 Kling AI
0:16

ギャルになりたい時もある🔥 そんな時はGAL ENERGY "GAL GAL" KLING Omniで小物を登録すると商品の一貫性保てるので商品紹介の動画とかは作りやすそうですね。 GrokImagine Qualityモードで画像生成してみましたが、顔の調整が難しいです。またかわいい子の生成のし方を見つけないと。 #Kling3 Kling AI

AI Girl's Photo Studio

14,209 views • 2 months ago

【Kling1.6(Kling AI )】リファレンス機能追加！ １～４枚の画像を参照してテキスト指示から動画が生成できるようになりました。 PikaやViduでも実装されていてお馴染みの機能となってきましたが、Klingの性能はやっぱりすごいです。 キャラクターや服装、場所やオブジェクトなど参照した画像をプロンプト指示で自由自在に動かすことができます。 この動画はリアル系人物とアニメ系イラストを参照して生成しました。 プロンプトは、「日本人女性と青髪のアニメキャラクターが抱き合う」と記載しています。 ガチャ無し１回生成でこのクオリティーなので工夫すればもっと色々できると思います。 参考までに同様の参照画像とプロンプトでViduやPikaでも試しましたので、気になる方はリプ欄で結果をご覧ください。 ※基本的にCPPで情報が早いですがおそらく数日後にはリリースされます。 #KlingAI #動画生成AI #AI動画
0:11

【Kling1.6(Kling AI )】リファレンス機能追加！ １～４枚の画像を参照してテキスト指示から動画が生成できるようになりました。 PikaやViduでも実装されていてお馴染みの機能となってきましたが、Klingの性能はやっぱりすごいです。 キャラクターや服装、場所やオブジェクトなど参照した画像をプロンプト指示で自由自在に動かすことができます。 この動画はリアル系人物とアニメ系イラストを参照して生成しました。 プロンプトは、「日本人女性と青髪のアニメキャラクターが抱き合う」と記載しています。 ガチャ無し１回生成でこのクオリティーなので工夫すればもっと色々できると思います。 参考までに同様の参照画像とプロンプトでViduやPikaでも試しましたので、気になる方はリプ欄で結果をご覧ください。 ※基本的にCPPで情報が早いですがおそらく数日後にはリリースされます。 #KlingAI #動画生成AI #AI動画

SEIIIRU😈動画生成AIを使う映像クリエイター

103,931 views • 1 year ago

EDMフェス動画にSeedance2を使ったのですが、引用元の画像（実際はもっと多く８画像）に対して以下のようなプロンプトを実行して10本程度動画を作成し、編集で使えるシーンを切り取って結合しました。 音楽はSunoAIで生成したもので上書きしてます。 添付動画はこのプロンプトで生成した動画の一部です！ Seedance2のプロンプト👇 参照画像をランダム選び、EDMダンスフェスのライブ映像を作成してください。音響はフェス仕様で迫力があり、リアルサウンド、ハウスミュージック、会場の反響音、掛け声、観客席たちは手を大きく上げ下げしたり、カメラに対して、両手でハートマーク、ウインク、手を振るなどをして、体を揺らして踊り、熱狂している。偶にドローンカメラによる上空からの映像やDJブースの映像に切り替わる。
0:15

EDMフェス動画にSeedance2を使ったのですが、引用元の画像（実際はもっと多く８画像）に対して以下のようなプロンプトを実行して10本程度動画を作成し、編集で使えるシーンを切り取って結合しました。 音楽はSunoAIで生成したもので上書きしてます。 添付動画はこのプロンプトで生成した動画の一部です！ Seedance2のプロンプト👇 参照画像をランダム選び、EDMダンスフェスのライブ映像を作成してください。音響はフェス仕様で迫力があり、リアルサウンド、ハウスミュージック、会場の反響音、掛け声、観客席たちは手を大きく上げ下げしたり、カメラに対して、両手でハートマーク、ウインク、手を振るなどをして、体を揺らして踊り、熱狂している。偶にドローンカメラによる上空からの映像やDJブースの映像に切り替わる。

聖星あい＠AI研究家

32,038 views • 1 month ago

【なぜか知られていない Kling の神機能📢】 ✅作成したAI動画を ✅アップロードするだけで ✅「効果音」が付与される Klingの神機能があるって知ってました？？ --- 以前、 STUDIO異次元（STUDIO異次元【AI映画】）さんと、 対談ライブをさせてもらったときに教えてもらいました！ やり方はマジで簡単で、 ①：Klingの「Sound Generation」を選ぶ ↓ ②：作成したAI動画をアップロードする ↓ ③：つけたい効果音のプロンプトを入力する ↓ ④：完成 です！ 自分も知らなかったですが、 なぜこんな神機能知られていないんや・・・ --- 使い方のコツとしては、 恐らく、アップロードするAI動画の相性によって、 適切な効果音がつくかどうかが決まっている。 （プロンプトはそこまで効かないっぽい） んですが、 ハマるAI動画だった場合は、 一気に臨場感が増します📢 ちなみに、添付した動画は、 ・BGMはSUNOで作成して、編集で乗せてる → 効果音だけでなく薄っすらBGMも入ってた ・人物が動画内にいる場合、意図しない声も入る → ので、SUNOのBGMでごまかした （ということでKlingさん何卒アプデを🙏） ただ、 効果音がつくだけで、 一気に世界観に惹きこまれるので🫶 一度、試す価値はありありです！ --- ちなみに、現在絶賛、 全てのAI創作の基礎になる、 「たなか式プロンプト言語化ガイド」 なるものを作ってるので、お楽しみに☺️ #klingai
0:12

【なぜか知られていない Kling の神機能📢】 ✅作成したAI動画を ✅アップロードするだけで ✅「効果音」が付与される Klingの神機能があるって知ってました？？ --- 以前、 STUDIO異次元（STUDIO異次元【AI映画】）さんと、 対談ライブをさせてもらったときに教えてもらいました！ やり方はマジで簡単で、 ①：Klingの「Sound Generation」を選ぶ ↓ ②：作成したAI動画をアップロードする ↓ ③：つけたい効果音のプロンプトを入力する ↓ ④：完成 です！ 自分も知らなかったですが、 なぜこんな神機能知られていないんや・・・ --- 使い方のコツとしては、 恐らく、アップロードするAI動画の相性によって、 適切な効果音がつくかどうかが決まっている。 （プロンプトはそこまで効かないっぽい） んですが、 ハマるAI動画だった場合は、 一気に臨場感が増します📢 ちなみに、添付した動画は、 ・BGMはSUNOで作成して、編集で乗せてる → 効果音だけでなく薄っすらBGMも入ってた ・人物が動画内にいる場合、意図しない声も入る → ので、SUNOのBGMでごまかした （ということでKlingさん何卒アプデを🙏） ただ、 効果音がつくだけで、 一気に世界観に惹きこまれるので🫶 一度、試す価値はありありです！ --- ちなみに、現在絶賛、 全てのAI創作の基礎になる、 「たなか式プロンプト言語化ガイド」 なるものを作ってるので、お楽しみに☺️ #klingai

たなか / AI映画監督

16,413 views • 4 months ago

最近はもうAIで作った曲しか聞かなくなってきた 『自分の好きな曲を自分で作って聞く』という未来も、もう間近だと思う まだややこしい部分はあるけど、例えばSunoがもう1〜2段階アプデしたら一般化しそう 添付はKling 3.0のマルチカットで色々指示しまくって、良い部分を切り取って繋げて適当に作った感じです たとえばマルチカットで出てきた『良さげなワンカットをキャプチャ』して『そのプロンプトを再構築して再生成』からの『高画質化』して『再び3.0で動画化』とかすれば、より高品質にできますね まだ全投げではなく、ワークフローを工夫する段階にあるので、もうちょいAIを楽しめそうです 画像 : Midjourney(Midjourney / Nano banana pro) 動画 : Kling(Kling AI ) リップシンク : Domo(DomoAI official ) 音楽 : Suno(Suno )
0:15

最近はもうAIで作った曲しか聞かなくなってきた 『自分の好きな曲を自分で作って聞く』という未来も、もう間近だと思う まだややこしい部分はあるけど、例えばSunoがもう1〜2段階アプデしたら一般化しそう 添付はKling 3.0のマルチカットで色々指示しまくって、良い部分を切り取って繋げて適当に作った感じです たとえばマルチカットで出てきた『良さげなワンカットをキャプチャ』して『そのプロンプトを再構築して再生成』からの『高画質化』して『再び3.0で動画化』とかすれば、より高品質にできますね まだ全投げではなく、ワークフローを工夫する段階にあるので、もうちょいAIを楽しめそうです 画像 : Midjourney(Midjourney / Nano banana pro) 動画 : Kling(Kling AI ) リップシンク : Domo(DomoAI official ) 音楽 : Suno(Suno )

AI FREAK@AI最新情報をお届け

33,372 views • 4 months ago

動画生成AI「KLING 3.0」は、複数人のモーションも、セリフも同時に生成可能。 1枚のAI画像を元に、日本語でセリフ＋複数カットの指示を出しただけ。 まるで画像から飛び出してきたような映像表現。 2人の触れ合いや細かな表情まで、かなりリアル。
0:15

動画生成AI「KLING 3.0」は、複数人のモーションも、セリフも同時に生成可能。 1枚のAI画像を元に、日本語でセリフ＋複数カットの指示を出しただけ。 まるで画像から飛び出してきたような映像表現。 2人の触れ合いや細かな表情まで、かなりリアル。

HAL2400 | AI Visual Creator

103,577 views • 4 months ago

#MidjourneyV6 で生成した画像をMarigoldを使ってDepthを生成、その後、Blenderで3D化。FBXにして #LumePad2 のLeiaViewerで3D表示。とてもしっかり3D立体視で出てる。これをやりたかった。
0:15

#MidjourneyV6 で生成した画像をMarigoldを使ってDepthを生成、その後、Blenderで3D化。FBXにして #LumePad2 のLeiaViewerで3D表示。とてもしっかり3D立体視で出てる。これをやりたかった。

新清士@AIコンテンツ開発者

36,204 views • 2 years ago

Claude Codeを使った AI漫画×歴史ジャンルの動画の作り方を 超具体的に解説してみた。 以下、 AIで歴史ジャンルの動画を作る手順です ①ChatGPTで台本作成 ↓ ②Claude Codeで画像生成用のプロンプトを生成 ↓ ③NanoBananaでイラストを生成 ↓ ④Klingでイラストを動画素材にする ↓ ⑤ElevenLabsで音声を生成 あとは好きな編集ソフトで素材を組み合わせれば 漫画×歴史ジャンルの動画が完成します。 初心者は画像生成に苦戦しがちだけど Claude Codeを使えばイラスト生成はコピペだけでOK 動画の作り方を詳しく知りたい人は プロフのリンクを追加して「歴史漫画」と送れば この動画の作り方をまとめたnoteを渡します🐨
0:18

Claude Codeを使った AI漫画×歴史ジャンルの動画の作り方を 超具体的に解説してみた。 以下、 AIで歴史ジャンルの動画を作る手順です ①ChatGPTで台本作成 ↓ ②Claude Codeで画像生成用のプロンプトを生成 ↓ ③NanoBananaでイラストを生成 ↓ ④Klingでイラストを動画素材にする ↓ ⑤ElevenLabsで音声を生成 あとは好きな編集ソフトで素材を組み合わせれば 漫画×歴史ジャンルの動画が完成します。 初心者は画像生成に苦戦しがちだけど Claude Codeを使えばイラスト生成はコピペだけでOK 動画の作り方を詳しく知りたい人は プロフのリンクを追加して「歴史漫画」と送れば この動画の作り方をまとめたnoteを渡します🐨

コアラ | YouTubeで1.5億円🐨

131,366 views • 2 months ago

💡 動画生成AIは余白で動きを決める 🎥 左右の動画を見比べてみましょう。 右のこぢんまりとした動きに対して、左のキャラは身体全体を使った動きをしてます。 実はこの二つの動画「同一プロンプト・同一素材」で生成してます。 なら違いは何か？左の素材画像に対して余白を追加しているのです。 余白の分だけ、キャラクターの動く余地が生まれます。同じプロンプトなのに、より大きい動きが可能になります。逆に動きが大きい場合は、対象キャラクターをフレームギリギリまで近づけることで動きを抑制できます。 もちろんプロンプトでも動きを調整できます。しかし、動きのポテンシャルは余白の有無で決まっているように感じるのです。 以下は優先度の仮説です 1. 動かすだけの余白があるか（フレームとキャラクターの比率=提供画像） 2. その中でどれだけ動かすか（プロンプト） 個人的にはかなり本質的な発見です。 最終的なショットと生成に相応しいショットが異なることを示すからです。このギャップを認識していないと、動画生成AIから十分な性能を引き出せないことになります。 あくまでも生成用にショットサイズを調整して出力、その結果を後でトリミング＆アップスケールで編集に回す、という工夫が必要かもしれません。 生成AIは実写やアニメと異なり、アクター/モデルとフレームの関係が逆転しています。フレームが先で、その中で初めて演技もキャラクターも生成されるのです。この違いを認識することが重要なのではないかと思いました。
0:10

💡 動画生成AIは余白で動きを決める 🎥 左右の動画を見比べてみましょう。 右のこぢんまりとした動きに対して、左のキャラは身体全体を使った動きをしてます。 実はこの二つの動画「同一プロンプト・同一素材」で生成してます。 なら違いは何か？左の素材画像に対して余白を追加しているのです。 余白の分だけ、キャラクターの動く余地が生まれます。同じプロンプトなのに、より大きい動きが可能になります。逆に動きが大きい場合は、対象キャラクターをフレームギリギリまで近づけることで動きを抑制できます。 もちろんプロンプトでも動きを調整できます。しかし、動きのポテンシャルは余白の有無で決まっているように感じるのです。 以下は優先度の仮説です 1. 動かすだけの余白があるか（フレームとキャラクターの比率=提供画像） 2. その中でどれだけ動かすか（プロンプト） 個人的にはかなり本質的な発見です。 最終的なショットと生成に相応しいショットが異なることを示すからです。このギャップを認識していないと、動画生成AIから十分な性能を引き出せないことになります。 あくまでも生成用にショットサイズを調整して出力、その結果を後でトリミング＆アップスケールで編集に回す、という工夫が必要かもしれません。 生成AIは実写やアニメと異なり、アクター/モデルとフレームの関係が逆転しています。フレームが先で、その中で初めて演技もキャラクターも生成されるのです。この違いを認識することが重要なのではないかと思いました。

NOBU

172,706 views • 1 year ago

【Runway(Runway)】Act-Two📢 Runwayで実装されていたリップシンクの上位互換のような機能Act-Oneがアップデートされて「Act-Tow」として新たに導入されました！ モーションキャプチャー的な作業や、フェイスリグを作ってアニメーション付けしていた作業はAIで代替可能になりますね。 ※現在、CPP早期アクセスでのみ利用可能です。 最大30秒の音声、ジェスチャー、顔の表情の動画素材を使って指定した画像を動かせます。 Act-Oneでは表情がメインでしたが、今回Act-Twoからジェスチャーまでしっかりコピーしてくれるので自由自在です。 人間的な表情の微妙な変化をプロンプトで再現するのはとても曖昧ですが、Runwayでは自分をスマホで撮影するだけでもリアルな表情や動きを作ることができます。 Runwayは画像生成のリファレンスもトップクラスで優秀なので全体的に使いやすいです。 これは一回目のテストなので、Act-Twoを含め色々テストして良い使い方を見つけたらまた共有します🙏 #Runway #ActTwo #動画生成AI
0:11

【Runway(Runway)】Act-Two📢 Runwayで実装されていたリップシンクの上位互換のような機能Act-Oneがアップデートされて「Act-Tow」として新たに導入されました！ モーションキャプチャー的な作業や、フェイスリグを作ってアニメーション付けしていた作業はAIで代替可能になりますね。 ※現在、CPP早期アクセスでのみ利用可能です。 最大30秒の音声、ジェスチャー、顔の表情の動画素材を使って指定した画像を動かせます。 Act-Oneでは表情がメインでしたが、今回Act-Twoからジェスチャーまでしっかりコピーしてくれるので自由自在です。 人間的な表情の微妙な変化をプロンプトで再現するのはとても曖昧ですが、Runwayでは自分をスマホで撮影するだけでもリアルな表情や動きを作ることができます。 Runwayは画像生成のリファレンスもトップクラスで優秀なので全体的に使いやすいです。 これは一回目のテストなので、Act-Twoを含め色々テストして良い使い方を見つけたらまた共有します🙏 #Runway #ActTwo #動画生成AI

SEIIIRU😈動画生成AIを使う映像クリエイター

22,876 views • 11 months ago

メイキング的なやつです。 今回は、基本的なアニメーションの作り方である 『pose to pose』をAIでやったらどうなるか？ という試みでした🥹 結論から先に言うと 「まぁまぁ大変だし、AI時代のスピード感にはそぐわないだろうな」です。 ある程度、予想もしてましたが🤣 今回は、コンテ、ラフ原を描いて(あるいは3Dで)、絵や動きを「ある程度」コントロールしたい人向けのフローなのかなと思います。 そういった方で、AIにまだ馴染みが無い方向けに、今度、もう少し詳細な、記事かnote書こうと思います。 ---------------------------------------------- ※pose to poseというは、 動きのキーとなるポーズ、主に動きの変化点などの絵を複数枚、先に用意して、後から、間の絵をうめていってアニメーションにする手法です。 キーとなるポーズや絵を、「キーフレーム」とか「原画」。間を埋めていく絵や作業などを「中割り」「動画」と言います。 ---------------------------------------------- 以下は、AI界隈の方向け、メイキングの簡易的な説明です。 端的にいうと、 先にラフ絵で動きのプランをつくり、 その絵を使って、キーフレームの絵を生成して、 あとはひたすらスタートエンドで生成。 です🥹 --------------- ①コンテ撮をつくる いわゆるアニメの原画よりは枚数少ないですが、 ラフな絵で、動きのキーとなる一連の絵を用意して、先に動きの流れをつくります。 --------------- ②キーフレームの作成 コンテ絵と、事前につくったキャラ絵をリファレンスにして、NanoBananaPro等で、各キーフレームの絵を生成＆加工します。 私の拙いラフ絵なので、結構ガチャりましたが、もう少し丁寧に描いた、アニメーターさんのラフ原とかだと、もう少し絵のコントロールが、できるんじゃないかなと思います。 タッチ線を入れたり、変身後の衣装に変えたりなどは、さらに２段階、３段階の生成が必要でした。 --------------- ③中割りの作成 キーフレームを順番に並べて、それぞれの間を、スタートエンドで、動画生成します。 今回使用したのは、 DomoAI official / Kling AI / Hailuo AI-MiniMax Hub の３つです。 主力はDomoAIで、3秒尺の生成ができるのと、割と単純な中割りになるのが良かったです。 逆に単純に割ってほしくない場合(例えば回転していて別のアングルが途中で入るとか)は、KlingやHailuoを使いました。 --------------- ④フレームの選定(コマ抜き) 生成された各動画をつないで、元々つくっていたコンテ撮のタイミングに合わせて、大胆に絵を抜いてきます。 極端なものだと、3秒(約72枚)生成して、その間の１枚しか使わない。みたいな感じですｗ あとはいわゆるタメツメの調整など --------------- ⑤撮影＆編集 別途用意した、イメージ流背のBGやエフェクト素材などと合わせてコンポジット。処理かけて、SEとBGM入れて完成です。 --------------- つまり、①と④の工程で、思いっきり、アニメーター的技能を使うことで、動きのキモはAIではなく、自分でやるということですね。 ◆メリットとしては - 動きや演技をあるていど自分でコントロールできる - ある程度積み上げながらの作業なので、部分的な修正が可能 - 溶けにくい など ◆一方デメリットは - 他のAIの手法に比べて、相当時間がかかる - クレジット消費も激しい - 色やキャラが、１カット内で安定しない （髪の毛の本数がかわったりなど、カットまたぐ分にはきにならないものでも、動きの途中で変わっちゃうので、結構目立つ） - 実景の空間でのカメラワークとかが混ざると、多分さらに難易度が上がる - コントロールに結局限界が(まだ)ある などなど、、、、 時間と手間がかかるけど、商業レベルの「品質」まで対応できるわけではない。しかも手描きアニメーターの上手い人なら、下手したら同じくらいの時間でできちゃうかもしれない。。。 ゆえに冒頭の結論に至るわけです🤣 -----------------------------------------
0:14

メイキング的なやつです。 今回は、基本的なアニメーションの作り方である 『pose to pose』をAIでやったらどうなるか？ という試みでした🥹 結論から先に言うと 「まぁまぁ大変だし、AI時代のスピード感にはそぐわないだろうな」です。 ある程度、予想もしてましたが🤣 今回は、コンテ、ラフ原を描いて(あるいは3Dで)、絵や動きを「ある程度」コントロールしたい人向けのフローなのかなと思います。 そういった方で、AIにまだ馴染みが無い方向けに、今度、もう少し詳細な、記事かnote書こうと思います。 ---------------------------------------------- ※pose to poseというは、 動きのキーとなるポーズ、主に動きの変化点などの絵を複数枚、先に用意して、後から、間の絵をうめていってアニメーションにする手法です。 キーとなるポーズや絵を、「キーフレーム」とか「原画」。間を埋めていく絵や作業などを「中割り」「動画」と言います。 ---------------------------------------------- 以下は、AI界隈の方向け、メイキングの簡易的な説明です。 端的にいうと、 先にラフ絵で動きのプランをつくり、 その絵を使って、キーフレームの絵を生成して、 あとはひたすらスタートエンドで生成。 です🥹 --------------- ①コンテ撮をつくる いわゆるアニメの原画よりは枚数少ないですが、 ラフな絵で、動きのキーとなる一連の絵を用意して、先に動きの流れをつくります。 --------------- ②キーフレームの作成 コンテ絵と、事前につくったキャラ絵をリファレンスにして、NanoBananaPro等で、各キーフレームの絵を生成＆加工します。 私の拙いラフ絵なので、結構ガチャりましたが、もう少し丁寧に描いた、アニメーターさんのラフ原とかだと、もう少し絵のコントロールが、できるんじゃないかなと思います。 タッチ線を入れたり、変身後の衣装に変えたりなどは、さらに２段階、３段階の生成が必要でした。 --------------- ③中割りの作成 キーフレームを順番に並べて、それぞれの間を、スタートエンドで、動画生成します。 今回使用したのは、 DomoAI official / Kling AI / Hailuo AI-MiniMax Hub の３つです。 主力はDomoAIで、3秒尺の生成ができるのと、割と単純な中割りになるのが良かったです。 逆に単純に割ってほしくない場合(例えば回転していて別のアングルが途中で入るとか)は、KlingやHailuoを使いました。 --------------- ④フレームの選定(コマ抜き) 生成された各動画をつないで、元々つくっていたコンテ撮のタイミングに合わせて、大胆に絵を抜いてきます。 極端なものだと、3秒(約72枚)生成して、その間の１枚しか使わない。みたいな感じですｗ あとはいわゆるタメツメの調整など --------------- ⑤撮影＆編集 別途用意した、イメージ流背のBGやエフェクト素材などと合わせてコンポジット。処理かけて、SEとBGM入れて完成です。 --------------- つまり、①と④の工程で、思いっきり、アニメーター的技能を使うことで、動きのキモはAIではなく、自分でやるということですね。 ◆メリットとしては - 動きや演技をあるていど自分でコントロールできる - ある程度積み上げながらの作業なので、部分的な修正が可能 - 溶けにくい など ◆一方デメリットは - 他のAIの手法に比べて、相当時間がかかる - クレジット消費も激しい - 色やキャラが、１カット内で安定しない （髪の毛の本数がかわったりなど、カットまたぐ分にはきにならないものでも、動きの途中で変わっちゃうので、結構目立つ） - 実景の空間でのカメラワークとかが混ざると、多分さらに難易度が上がる - コントロールに結局限界が(まだ)ある などなど、、、、 時間と手間がかかるけど、商業レベルの「品質」まで対応できるわけではない。しかも手描きアニメーターの上手い人なら、下手したら同じくらいの時間でできちゃうかもしれない。。。 ゆえに冒頭の結論に至るわけです🤣 -----------------------------------------

ててつろう

179,905 views • 4 months ago

【Morphic(Morphic)】AIアニメ特化!? このツールは新たなAIアニメ制作ツールとなる次世代ツールです。 まだ使っていない人が多いのは、ようやく本格的に始動したからです。 依頼があってCPPになりましたので少し使わせてもらいましたが、今までのツールのような偶然に頼るガチャツールではありません。 イラストのボーンを編集して新しいポーズを生成したり、オブジェクトを要素ごとに分解して変更したり、色を変えたりとアニメ編集機能が複数集約されています。 言語を日本語にできて、ブラウザもシンプルで見やすく、ペンツールやテキストツールや範囲選択など、クリエイターには使い馴染みのある操作感でサクサク作れます。 もちろん基本的な「text to image」や「image to image」や「image to video」もあり、プロンプトの効き具合も良さそうです。 さらに補完機能があり、フレームレートも最大24pまで細かく設定でき、生成時間も最大10秒まで秒単位で調整可能なようです。 縦横比率は、「16:9」「4:3」「1:1」「9:16」の四種類から選べて、画像生成は「Default」「Anime」「Realism」「Flat Anime」の四種類からスタイルを選べます。 そしてキャラクター作成機能もあり、複数の画像を学習させることでキャラクターとして保存でき、生成時にプロンプトタグとして追加できます。 無制限プランも用意されていて、無料枠もあるのでアニメ制作が好きな方は、ぜひ登録して使ってみてください。 まだCPPとして使いだしたばかりなので、間違っていたり抜けている情報もあるかもしれませんが、これから徐々に紹介できればと思います。 人気になること間違いなしのツールなので、いち早く乗りこなしましょう！ (※最新ツール情報はハイライトタブに随時更新中) #Morphic #AI動画 #動画生成AI
0:15

【Morphic(Morphic)】AIアニメ特化!? このツールは新たなAIアニメ制作ツールとなる次世代ツールです。 まだ使っていない人が多いのは、ようやく本格的に始動したからです。 依頼があってCPPになりましたので少し使わせてもらいましたが、今までのツールのような偶然に頼るガチャツールではありません。 イラストのボーンを編集して新しいポーズを生成したり、オブジェクトを要素ごとに分解して変更したり、色を変えたりとアニメ編集機能が複数集約されています。 言語を日本語にできて、ブラウザもシンプルで見やすく、ペンツールやテキストツールや範囲選択など、クリエイターには使い馴染みのある操作感でサクサク作れます。 もちろん基本的な「text to image」や「image to image」や「image to video」もあり、プロンプトの効き具合も良さそうです。 さらに補完機能があり、フレームレートも最大24pまで細かく設定でき、生成時間も最大10秒まで秒単位で調整可能なようです。 縦横比率は、「16:9」「4:3」「1:1」「9:16」の四種類から選べて、画像生成は「Default」「Anime」「Realism」「Flat Anime」の四種類からスタイルを選べます。 そしてキャラクター作成機能もあり、複数の画像を学習させることでキャラクターとして保存でき、生成時にプロンプトタグとして追加できます。 無制限プランも用意されていて、無料枠もあるのでアニメ制作が好きな方は、ぜひ登録して使ってみてください。 まだCPPとして使いだしたばかりなので、間違っていたり抜けている情報もあるかもしれませんが、これから徐々に紹介できればと思います。 人気になること間違いなしのツールなので、いち早く乗りこなしましょう！ (※最新ツール情報はハイライトタブに随時更新中) #Morphic #AI動画 #動画生成AI

SEIIIRU😈動画生成AI×AfterEffects

74,749 views • 1 year ago

PR【こりゃすごい Topview Agent v2】 Topview（TOPVIEW（トップビュー）日本公式）のAgent v2に引用の動画を渡して、簡単な指示で続きのシーンを作るようお願いしてみたら、声・BGM・キャラクターの一貫性をそのまま引き継いで、自然なシーンを生成してくれた…これはちょっとびっくりしましたね。 Agent v2は1つの画面で続きのシーンを生成・編集できるのがかなり便利（1カットの生成は15秒までです）リプに繋げてみたフル動画を貼るので、ぜひ見てみてください。 #TopviewAI #Seedance2
0:15

PR【こりゃすごい Topview Agent v2】 Topview（TOPVIEW（トップビュー）日本公式）のAgent v2に引用の動画を渡して、簡単な指示で続きのシーンを作るようお願いしてみたら、声・BGM・キャラクターの一貫性をそのまま引き継いで、自然なシーンを生成してくれた…これはちょっとびっくりしましたね。 Agent v2は1つの画面で続きのシーンを生成・編集できるのがかなり便利（1カットの生成は15秒までです）リプに繋げてみたフル動画を貼るので、ぜひ見てみてください。 #TopviewAI #Seedance2

ICO

12,883 views • 2 months ago

引き続きSeedance 2.0。 自分がNoteで公開している各種の画像付き小説には動画が付いているものがありますが、一部を除いて、当時の技術で生成可能だったレベルの動画を、チョロっとだけ試しに生成する程度でした。 技術が成熟してきたら、いずれは動画でのリメイクに取り組みたいという思いは常に持っていて、Sora2やSeedance 2.0のような技術レベル向上が見られた際に、試すようにしています。 「【MC Heroine】潜入捜査 - レッドの場合」 ということで、添付はレッドの物語の1シーンを、パイロット的にSeedance 2.0で生成してみたわけですが・・・ ヤバいなと思うのは、ちょっと試してみようか、と気軽に生成してこのクオリティが出てしまうと、「この次のシーンを」「前のシーンを」「ディテールをもっと改善したい」と、次々生成したくなるという中毒にハマるということですね。案の定、これを生成したあと、前後のシーンを引き続き付け加えたりしていますｗ このまま長い動画を作り始めてしまうと、いろいろ余裕がなくなりますので、適当なところで止めるつもりですが・・・ （Seedanceだけで作るのはコスト的にとても無理なので、動きの少ない場面はKling等を併用するようにしています） しかしSeedance 2.0は相変わらず顔参照のOK/NG判定基準がよくわからず、思わぬところでひっかかったりしますね。
0:15

引き続きSeedance 2.0。 自分がNoteで公開している各種の画像付き小説には動画が付いているものがありますが、一部を除いて、当時の技術で生成可能だったレベルの動画を、チョロっとだけ試しに生成する程度でした。 技術が成熟してきたら、いずれは動画でのリメイクに取り組みたいという思いは常に持っていて、Sora2やSeedance 2.0のような技術レベル向上が見られた際に、試すようにしています。 「【MC Heroine】潜入捜査 - レッドの場合」 ということで、添付はレッドの物語の1シーンを、パイロット的にSeedance 2.0で生成してみたわけですが・・・ ヤバいなと思うのは、ちょっと試してみようか、と気軽に生成してこのクオリティが出てしまうと、「この次のシーンを」「前のシーンを」「ディテールをもっと改善したい」と、次々生成したくなるという中毒にハマるということですね。案の定、これを生成したあと、前後のシーンを引き続き付け加えたりしていますｗ このまま長い動画を作り始めてしまうと、いろいろ余裕がなくなりますので、適当なところで止めるつもりですが・・・ （Seedanceだけで作るのはコスト的にとても無理なので、動きの少ない場面はKling等を併用するようにしています） しかしSeedance 2.0は相変わらず顔参照のOK/NG判定基準がよくわからず、思わぬところでひっかかったりしますね。

hvplan

15,288 views • 2 months ago

【画像数枚からAIアニメ動画を初心者でもサクッと5分で作る方法を配ります】 昨日公開されたVidu Q2のリファレンス機能を早速試してみたんですが、nano-bananaみたいに画像を数枚渡すだけで素材そのままの動画を作ってくれるのでめっちゃ便利でした！ 今までAI動画はプロンプトや破綻のコントロールが難所だったんですが、ほんとどんどん簡単になっていきますね。 初心者でもこんな感じの動画が作れるようにやり方をまとめたので、受け取りたい方はいいね+「好きな絵文字」をリプしてください。
0:17

【画像数枚からAIアニメ動画を初心者でもサクッと5分で作る方法を配ります】 昨日公開されたVidu Q2のリファレンス機能を早速試してみたんですが、nano-bananaみたいに画像を数枚渡すだけで素材そのままの動画を作ってくれるのでめっちゃ便利でした！ 今までAI動画はプロンプトや破綻のコントロールが難所だったんですが、ほんとどんどん簡単になっていきますね。 初心者でもこんな感じの動画が作れるようにやり方をまとめたので、受け取りたい方はいいね+「好きな絵文字」をリプしてください。

T🇯🇵

33,386 views • 7 months ago