Loading video...

Video Failed to Load

Go Home

MiniMax H3で部屋を先に360°回して1本の動画にしておくと、AIアニメの背景がぶれにくくなくなる話。 AI生成アニメで困るのはカットが変わるたびに背景が別になってしまうことです。 キャラの一貫性は参照画像でだいぶ抑えられるようになりましたが、背景は毎回その場で描き直されて困ることが多いです。 対策として欲しい背景を「先に一貫性のある形でH3で撮影しておいて、あとから必要な壁だけ抜き出す」やり方が効きました。 今回は広角ぎみの一枚絵を開始フレームにして部屋を定点で360°回した動画を1本作り、それを部屋の唯一の正しい参照とします。 カメラ位置とカット点は、Blenderで箱と円柱だけの灰色クレイを作って動画で渡しました(クレイはClaude Codeに作らせています)。 そしてカットごとにカメラが向く壁の1フレームを切り出して参照画像にします。 オービット動画である必要はなくて、「後で切り出せる、矛盾のない背景の元」を作れればそれで構わなそうです。

45,051 views • 1 month ago •via X (Twitter)

10 Comments

鈴木憂一 | Highdrama's profile picture
鈴木憂一 | Highdrama1 month ago

以下が使用したレファレンス類です。 参照するクレイ動画は、448×256や672×384位まで縮小して「背景については参考程度、立ち位置・カメラ・カット点は忠実に従う」と宣言したほうがよさそうです。 そうでないとクレイに引っ張られて、背景画像に存在しないものが生成されます。 Rtx5090、768pで動画時間12秒、蒸留8stepで生成時間7分半くらい。

Syu-chan's profile picture
Syu-chan1 month ago

Qwen image 2512:360 Panoramaてモデルがありますよ。 TemplatesのUse Casesの中にあります。

Toshi🎬AI動画💫MV制作🎧's profile picture
Toshi🎬AI動画💫MV制作🎧1 month ago

いつも同じ空間での背景の一貫性に困ってました。 この方法が解決策になりそうなので、試してみたいと思います! 有用な情報のシェア、ありがとうございます😸

鈴木憂一 | Highdrama's profile picture
鈴木憂一 | Highdrama1 month ago

ありがとうございます、お役に立てれば嬉しいです☺️ 開始フレームの一枚絵くらいで十分で、見えていない後ろの部分とかは、H3に結構自由に描かせたほうが破綻なく繋がってくれる印象でした。

uslab|AI×受託開発の検証ログ's profile picture
uslab|AI×受託開発の検証ログ1 month ago

背景を毎回描かせず、先に正解を1本作って切り出す発想が良いですね👀 クレイをClaude Codeに作らせているのが特に気になりました。

Sandbar's profile picture
Sandbar1 month ago

@Hailuo_AI Huh. Clever.

Aliaksei.AI's profile picture
Aliaksei.AI1 month ago

@kiyoshi_shin I wonder, if generate a panoramic photo of a place with a 360° view, how much can that help? Thank you @yu_ichi_suzuki 🙏🏻 I definitely should try it in a future video.

Nezko2026 | Premium+'s profile picture
Nezko2026 | Premium+1 month ago

By the way, using a video reference is great for maintaining background consistency, but doesn't it cost extra credits? Can't we just use a still cut as a reference instead?

Alex AI Home's profile picture
Alex AI Home1 month ago

Using one 360° pan as the single authoritative background is a clean fix for background redraws. I make AI-assisted balcony makeover Shorts — in my case the room itself changes between before/after, so I share the same clay-model camera path across both states and only swap the background reference. Does the wall-extraction trick hold up when furniture actually moves between cuts?

Lex Glitch's profile picture
Lex Glitch1 month ago

this workaround fails at scale. the model learns spatial inconsistency, not geometry. expect flicker to return once batch sizes exceed 100.

Related Videos

【ダンサー振り付けMVを作ってみた】 Seedance2.0で自分が踊ったダンス動画を参照させてMVを作ってみた! めちゃ良かったのは、Seedance2.0は、 振付動画をただの "参照動画" として扱ってくれたことです。 どういうことかというと、ダンスモーションを渡しても、「固定でその動きだけ」ではなく、 踊りながらアングルやショットサイズを変えてくれるし、 カメラワークも指示に従ってくれます!! たとえば、トラッキングする指示にしたら、ぼくは横に動いていないけど、ちゃんと踊りながら横に移動してくれました😆 こういうのができるの本当にありがたい! 今回のダンスMVのかんたんな作り方はこちらです。 👇 <作り方> ①動かしたいキャラのキャラクターシートを作ります ②Sunoで曲を作ります ③背景画像を作ります ④曲に合わせて踊ってるのを撮影します ⑤上記3つを参照させて、Seedance 2.0で動画を生成します ※Seedance2.0は15秒までなので、26秒の曲を2つに分割して2つ動画を生成し、編集で2つを繋げました。 自分の振付動画はリプに置いておきます! フリー素材なので煮るなり焼くなりご自由に使ってくださいー! あと一応プロンプトもぶら下げておくので、よければ自キャラで使ってみてくださいー! (プロンプトはだいぶこのキャラと背景用なので自由に改変してくださいませ) 現在、MVのコラボ相手を絶賛募集中です!☺️ 自分、振付作ります! コラボしてやってもいいお方がいらっしゃいましたら、ぜひお気軽にコメントやDMくださると嬉しいです! それではLet's do dance!!

Zeto

52,413 views • 4 months ago

無料公開 ローカルツール「KANA Layer Lab」🐰 機能1:レイヤー分離 画像内の人物やUIなどの簡単な要素を分離して、編集可能なレイヤーとして PNG / PSD で書き出しできます。 機能2:画像や動画の白背景・黒背景・グリーンバック・指定した単色背景を削除して、透過 PNG / WebM / MOV を出力できます。 (動画の42秒あたりから紹介しています) 完全ローカル動作。 料金は一切かかりません。 このエディタは、登山中に Codex に遠隔でお願いしながら作っていたものです。 今日はほぼ一日ずっとテストと調整をしていて、まだそこまで使いやすくはないけど、とりあえず実用にはなった」くらいの状態になりました🤣 ちなみに現在のレイヤー分離機能は、要素の分離だけ対応していて、背景の自動補完にはまだ対応していません。動画の29秒あたりに出てくる綺麗な背景画像は、別途 ChatGPT で生成しています。 使ったプロンプトは:「UIと人物と文字を全部消して、この画像の背景だけをください」みたいな感じです。 これで比較的きれいな背景だけの画像を作って、そのあとレイヤー分離で必要な要素を抜き出して、画像編集や動画編集に使っています。 あと、動画背景除去のときは、「色追加」を押すことで削除したい色を追加できます。ただ、この時点ではプレビューは自動更新されないので、そのあともう一回「プレビュー」を押すと、追加した色が反映された状態を確認できます。 自作ツールなので、商用ソフトほど完成度や精度は高くありません。 でも、 ・今の自分に必要な機能にかなり合わせられる ・サブスクやプラグイン代を少し減らせる というのは結構大きいです😂 今後もたぶん他のツールを作って公開していくと思います。 「こういう機能ほしい」みたいなのがあれば気軽にコメントください。 使っていて不便なところやバグっぽい部分があったら、 あとでまとめて調整・更新していく予定です🐰🫶

KANA|東京AI映像

57,255 views • 5 months ago

Sora2でカット割り -> Grokで動画化 今回のMVは自作の「Sora2のカット割りツール」を使ったらどれだけ時短できるかの検証をしてみました。下記を満たすのを品質条件にした前提で作業自体は約1時間で終わりました ◇品質条件 --- ゆるいストーリー(気まずい二人のデート)をもった2分半の動画。同一人物の一貫性、彼らの背景など様々なカットを出して「喧嘩してる」「でも二人とも心の中ではそんな小さなことにとらわれてちゃいけないよな」と気づいてはいる、というところまで映像で曲をサポートできている ---- なのでこれをnano-bananaでひとつずつやってくと結構大変です。全体で40カットあるのでその生成と選定で結構時間かかります。 Sora2では「高速なカット割り」とプロンプトすると結構カットを切り替えてくれます。このカット割りがとても優秀なのでこれをフレーム抽出して使う人も増えています。しかし微妙に時間かかります。40カットをポチポチ選んでいく必要があります。 今回はSora2で12秒動画を3つだし、40カットほどのフレーム抽出をしました。 このフレーム抽出リプ欄で紹介しているツールを使うとほんとに数秒で終わります。(今回一番時短したかったポイント!) さて、今回はかなり怠惰な生成アプローチをしたいのでGrokにノープロンプトで投げ続けました。あとはそれをつないだだけです。もっとこだわれるところはめちゃくちゃありますが、今回は上記の品質さえ満たせばOKって感じなのでこの辺は妥協してます Sora2を待っている時間が多分一番長かったのです。Grokは早いですね。途中から僕はただのコピペマシンでしたw てかGrokこれだけじゃんじゃん生成できてクオリティ高いの普通にバグってるわ このSora2のフレーム抽出ツール、需要がありそうなのでちょっと体裁を整えて明日ごろに公開します。別にSora2の動画じゃなくても使えます。一気にフレーム抽出できるのは楽しいですよ!

yachimat - AI Short Anime

36,474 views • 1 year ago

KAORI🍉channel Telegramより (30日 13:53 Skye Princeからの引用投稿) ※📚normotさんによる翻訳 〈動画訳〉 皆さん、こんにちは 分かりやすい説明で、混乱する点も全くありません メッドベッドには最低周波数が設定されており、魂を売っていない、少しだけ高い波動を持つ人だけが使用できます そうです、これは長年そうでした ずっとそうでした だからこそ、ディープステート、セレブ、アドレノクロムを使用している人たちは、メッドベッドを使用できないのです そうです メッドベッドを分解し、粉々に引き裂き、解体して、それを使って何か別のものを作り出すのです メッドベッドの技術を使って、何か別のものを作り出すのです もしかしたら、空飛ぶ車を作っているのかもしれません ポータルを作っているのかもしれません レプリケーターを作っているのかもしれません レプリケーターは、メッドベッドと同じ技術です あるいは、反重力装置を作っているのかもしれません メッドベッドを分解すると、その最小振動周波数は失われます なぜなら、その周波数はメッドベッド自体に設定されているからです しかし、メッドベッドの部品を取り外し、その技術だけを使って別のものを作ると、最小周波数はなくなります いいですか?洗濯機を例に考えてみましょう 洗濯機のモーターを取り外して、芝刈り機に取り付けることができます これで芝刈り機になります 同じモーター、同じ技術が洗濯機を動かしているのです それが今度は芝刈り機も動かしているのです メッドベッドだけは、最小振動周波数を持っています しかし、メッドベッドからその技術を取り除くと、もはやその最小周波数は存在しなくなります つまり、悪党どもがメッドベッドを手に入れたら、その技術を取り出し、別のものを作り出して悪用できるということです 難しいことではありません ロケット科学のような難解な話でもありません 混乱するようなことでもありません あらゆる技術は、善にも悪にも利用され得るのです 重要なのは、その使い方、つまりリバースエンジニアリングによって別のものを作り出すことです 例えば、メッドベッドの技術についてですが、悪党どもに雇われた科学者がいれば、メッドベッドを分解し、動力源となる技術を取り出して兵器を作り出すことができます 実際に彼らは既にそうしています 秘密宇宙計画の兵器の多くはどこから来ていると思いますか? 指向性エネルギー兵器はどこから来ていると思いますか? そうでしょう? メッドベッドには最低限の振動周波数が設定されていますが、そこから技術を取り出せば、あとは何でもありです いいですか?混乱するようなことでもありません 複雑なことでもありません 偽情報でもありません 何も変わっていません ただ、皆さんがより多くの情報を知るようになっただけです すべてが変わってしまった、すべてが混乱していると思っているかもしれません でも、そうではありません パズルのピースが増え、情報が増えただけです 進化するとはそういうことです 私がこの旅を始めたとき、本当に基本的なことから始めました 何も変わっていません ただ、より多くの情報を提供しているだけです 今、すべてが変わってしまったと思っているかもしれませんが、そうではありません あなたがより多くの情報を受け取る準備ができているからこそ、より多くの情報を受け取っているのです

KAORI🍉

11,967 views • 4 months ago

いまのAIに決定的に欠けているのは、僕たちの背景を理解する能力だ。だから毎回プロンプトで関係性を組み立て、状況説明をし、欲しい出力へ誘導しなければならない。だが、その制約が外れ始めたとき、AIは単なる便利ツールではなくなるのだろう。その日はきっと、それほど遠くない。 サム・アルトマン「今のモデルは、将来そうなるものと比べれば、まだかなり愚かです。しかもそれ以上に、あなたの人生についての理解がきわめて限られています。今はまだ、こちらがうまく、なだめたりすかしたりしながら、欲しいものを引き出さなければならないのです。 ですが、あなたの文脈をすべて知っているようなモデルは、もうそれほど遠くありません。そのモデルは、あなたのことを知っている。あなたの人生を知っている。何をしているかを知っている。何を大事にしているかを知っている。あなたの人生にいる人たちのことも知っている。もちろん、あなたが望む形で、望む範囲においてですが、あなたのコンピュータやブラウザにもアクセスできる。そして時間がたつにつれて、現実世界であなたの周囲に起きていることにも、ますますアクセスするようになるかもしれません。 それは、コンピュータを使う感覚、そしてAIを使う感覚そのものを、完全に変えてしまうはずです。私はそれに強く興奮しています。ただ、実際それがどんな感覚になるのかは、私たち自身でさえ、まだ十分に直感できていないと思います」 グレッグ・ブロックマン「まさにその点ですが、今の私たちは、チャットでも何でも、使っているツールに対して『何が起きているのか』を説明するのに、ものすごく多くの時間を使っています。そしてそれがどれだけ苛立たしいかを考えてみてください。まるで同僚に対して、いや、私が欲しいのはこういうことで、今こういう状況なんだ、と延々説明し続けているようなものです。今のシステムの振る舞い方は、本来こうあってほしい姿ではないのです」

Tsubame

15,287 views • 6 months ago

昨日と一昨日、僕の地元である兵庫県川西市で、『映画 えんとつ町のプペル ~約束の時計台~』の上映イベントをおこないました。 2日間の観客動員は、2420名。 (※チケット売り上げ、グッズ売り上げなどの細かい数字に関しては今日のサロン記事で全て共有させていただきますので、そちらでご確認ください) 今回、会場にはたくさんの子供たちが集まり、ロビーは縁日のような盛り上がりを見せ、映画を観に来たというより、お祭りに遊びに来たような空気があり、「熱狂」があり、それは僕らエンタメ屋がもっとも見たい景色でした。 ただ、最初からこの景色を目指していたわけはなくて、これは「プランB」なんです。 そもそも僕たちが上映イベントを始めたのは、映画公開時の初動が苦戦したことがキッカケで、「どうすれば、この作品を一人でも多くの方に観てもらえるんだろう?」という想いからでした。 4年半かけて作った作品が思うようなスタートを切れなくて、 申し訳ない気持ちになりましたし、みっともない気持ちにもなりましたし、 何より、悔しかったな。 映画業界には、「映画は公開から3日の結果がすべて」という定説があります。 初動が悪ければ、上映館数や上映回数が減り、そのまま興行が終わっていく…というアレです。 ただ、『映画 えんとつ町のプペル ~約束の時計台~』に関しては、評価と数字が合ってなくて、僕自身、この作品がこんなところで力尽きるとは到底思えなかったし、こんなところで終わりにしたくなかったんですね。 というわけで、「3日間で結果が出なければ終わり」ではなくて、その後からでも人を集めることができないのか考えてみることにしたわけです。 まず最初にやったのは「数字を盛ってよく見せようとするのではなくて、現状を正直に共有すること。 そして、それによって『応援シロ』を作ること。 「知られたくない結果」ほど皆は知りたいわけで、ここを見せないと何も始まらないので、「お恥ずかしい話ですが、今はココです」と現在地を正直に共有し、そこから、逆転の策を練りました。 その後に僕が提案したのは「長期決戦」でした。 「映画を10年間上映し続ける為には、何をして、何したらダメなのだろう?」と考えてみることに。 映画館に来てもらうだけではなく、映画そのものを「イベント」にして、人が集まる理由をつくることはできないのか?という試行錯誤の先に、今回の川西での上映イベントがあったわけです。 なので、初動が順調だったら、 何も問題が起きずに映画がヒットしていたら、 僕は、この2日間の景色を見ることができなかった。 第一希望(プランA)が必ずしも一番良い未来とは限らないなぁと昨日あらためて思いました。 そして、もう一つ思ったことがあります。 それは、「この景色を最優先する」ということ。 経営者なので、当然、収支は見ます。 事業として成立しているか。 キャッシュフローは大丈夫か。 投資したものをどう回収していくか。 それは、絶対に無視できません。 ですが、僕は経営者の前に一人のエンタメ屋です。 エンターテインメントには、目の前で人が笑い、子供たちが走り回り、町全体が少しだけ浮き足立っているような景色があって、それらには数字では測れない価値がある。 僕たちはこの価値を後回しにする会社であってはいけない。 今回の川西で、そのことを改めて教えてもらいました。 人生は、思い通りにいかないことだらけです。 経営も、思い通りにいかないことだらけです。 繰り返しますが、4年半かけて作った作品の初動が伸びなかった時、本当に苦しかったし、申し訳なかったし、みっともなかったし、悔しかった。 だけど、あの苦戦があったから、僕たちは「ならば、こっちでどうだ?」を考え、その結果、僕の地元・川西で2400人以上の人たちと一緒に、宝物のような景色を見ることができました。 ここから『映画 えんとつ町のプペル 〜約束の時計台〜』の上映イベントを各地で展開していきます。 皆様の街でもやらせていただきますので、是非、お越しください。 あらためて。 あの時は「失敗」だと思っていたものが、時間が経ってみると、僕たちを別の場所へ連れていってくれる大きなギフトでした。 だから、うまくいかないことを、すぐに「失敗」と決めつけないようにしたいと思います。 その出来事が、自分を連れていくのかは、その時点では分からないのだから。

西野亮廣(キングコング)

73,199 views • 2 months ago

【動画の投稿です。】【1/10-①】 ※度々申し訳ございません。 1本目の動画にて、今回の件と無関係である方の投稿等が映ってしまっておりましたため、その動画投稿を削除の上、該当する部分を切り取りました上で再度投稿させていただきます。 その際、4分割となってしまいましたので、本投稿にツリーの形で投稿させていただきます。元の動画の内容はそのままで、無関係である方が映ってしまった部分のみカットしております。 度々、本当に申し訳ございません・・・。 --- この度は色々とお騒がせしてしまい、 皆さまに不快な想いをさせてしまいまして、 本当に申し訳ございません。 あのまま投稿を全て止めようと考えていたのですが、 影響範囲があまりに広がってしまい、このままですと、数え切れないほどの皆さまやクリエイター様に更にご迷惑をお掛けしてしまうと思いますし、 私としても出来る限りのことはしたく、 最後に、争点に上がっております様々な詐称などの疑惑について、出来る限り、 自分なりにこうして動画を投稿することで、もし解決することができればと一縷の望みを抱きつつ、 もし解決が無理であっても、悔いのないように生きたいと思い、投稿させていただきました。 今回の動画の撮影場所は自宅で、撮影者は私の妻です。 おおまかな内容につきましては、 ・今回の件でインプレッション等が伸びてしまうことによって、青バッジの身である私に利益が生じていないか ・今回のイラストがAI生成されたものなのかどうか ・過去のイラストについて ・写真加工について ・プロフィール詐称疑惑について ・実際に描けるのかどうか などのことをメインに、お話しさせていただきましたつもりです。 全部で1時間34分ほどありますが、 X(Twitter)での投稿が最大10分とのことなので、動画を10個に分割して投稿させていただきたく思います。 「この動画自体がAIじゃん!」 と言われてしまえばもはやそれまでであり、 何も証拠は出すことができないのですが、 撮影自体はノーカットで、 私なりの想いをお伝えしたいと思います。 動画は本来であればツリーの形の方が良いかもしれませんが、 ひとまず1つずつ順番に投稿させていただきたいと思います。 こちらをご覧いただいても、なお 「ここの動画のこの部分がAIじゃん!!」 などと思われてしまうかもしれませんが、 これ以上のことは、私にはできず、申し訳ございません。 疑いが存在する以上、 「ないこと」や 「やってないこと」 を完全に証明するのは困難だと思いますし、 その点申し訳ない限りではございますが、 これ以上のことはもはやできません… なので、この動画投稿が本当に最後となります。 色々と突っ込みどころは多いと思います。 それでも、それを更に一つずつ解決していくだけの力は、残念ながら私にはありません。 ですので、 もし可能であれば最後までご覧いただき、 皆さまなりにご判断いただけましたら幸いに存じます。 今まで、本当にありがとうございました。 お騒がせしてしまい、大変申し訳ございませんでした。 秋月の空
2:31

Sensitive content

【動画の投稿です。】【1/10-①】 ※度々申し訳ございません。 1本目の動画にて、今回の件と無関係である方の投稿等が映ってしまっておりましたため、その動画投稿を削除の上、該当する部分を切り取りました上で再度投稿させていただきます。 その際、4分割となってしまいましたので、本投稿にツリーの形で投稿させていただきます。元の動画の内容はそのままで、無関係である方が映ってしまった部分のみカットしております。 度々、本当に申し訳ございません・・・。 --- この度は色々とお騒がせしてしまい、 皆さまに不快な想いをさせてしまいまして、 本当に申し訳ございません。 あのまま投稿を全て止めようと考えていたのですが、 影響範囲があまりに広がってしまい、このままですと、数え切れないほどの皆さまやクリエイター様に更にご迷惑をお掛けしてしまうと思いますし、 私としても出来る限りのことはしたく、 最後に、争点に上がっております様々な詐称などの疑惑について、出来る限り、 自分なりにこうして動画を投稿することで、もし解決することができればと一縷の望みを抱きつつ、 もし解決が無理であっても、悔いのないように生きたいと思い、投稿させていただきました。 今回の動画の撮影場所は自宅で、撮影者は私の妻です。 おおまかな内容につきましては、 ・今回の件でインプレッション等が伸びてしまうことによって、青バッジの身である私に利益が生じていないか ・今回のイラストがAI生成されたものなのかどうか ・過去のイラストについて ・写真加工について ・プロフィール詐称疑惑について ・実際に描けるのかどうか などのことをメインに、お話しさせていただきましたつもりです。 全部で1時間34分ほどありますが、 X(Twitter)での投稿が最大10分とのことなので、動画を10個に分割して投稿させていただきたく思います。 「この動画自体がAIじゃん!」 と言われてしまえばもはやそれまでであり、 何も証拠は出すことができないのですが、 撮影自体はノーカットで、 私なりの想いをお伝えしたいと思います。 動画は本来であればツリーの形の方が良いかもしれませんが、 ひとまず1つずつ順番に投稿させていただきたいと思います。 こちらをご覧いただいても、なお 「ここの動画のこの部分がAIじゃん!!」 などと思われてしまうかもしれませんが、 これ以上のことは、私にはできず、申し訳ございません。 疑いが存在する以上、 「ないこと」や 「やってないこと」 を完全に証明するのは困難だと思いますし、 その点申し訳ない限りではございますが、 これ以上のことはもはやできません… なので、この動画投稿が本当に最後となります。 色々と突っ込みどころは多いと思います。 それでも、それを更に一つずつ解決していくだけの力は、残念ながら私にはありません。 ですので、 もし可能であれば最後までご覧いただき、 皆さまなりにご判断いただけましたら幸いに存じます。 今まで、本当にありがとうございました。 お騒がせしてしまい、大変申し訳ございませんでした。 秋月の空

秋月の空

175,242 views • 2 months ago

この動画は私の知るAIアニメ研究者たちの情報を少しずつお借りして作成しました。 長い間バトル系AIアニメを研究してくれていた方々を私は知っています。 足りない性能の中、工夫して再現する姿は見ていて素晴らしくクリエイティブでした。 ツールの進化と共にクリエイターたちも進化しているAI動画界隈は見ているだけでも楽しいです。 AI動画ツールの進化は、そんな彼らの「好き」が開発の方向性を決めた結果ではないかと思います。 自分も彼らのようにいつまでも作る側でいたいものです。 【使用ツール】 Midjourneyで1枚生成 NanoBananaで差分生成 Hailuo AIで動画生成 Udioで音楽生成 ChatGPTでタイトル生成&etc... たった1枚画像生成するだけで、GoogleさんのNanoBananaは無限にシーンを再構成できます。 今回は1枚をずっと使っていましたが、作れば作るほどリファレンス素材が増えるので精度があがりそうです。 終わってから思ったんですが、できる限り全身が描かれていて背景の情報も多いイラストを用意するか、キャラクターの全身をNanoBananaでだしてから一緒に参照するか、靴とか服装とかプロンプトで補強するかしないと、服装が変わってしまいます。 今回はテストなので、動画生成も同じプロンプトでキーフレーム機能にまかせる形にしましたが、詳しい動作の内容や絵にないエフェクトの追加など、プロンプトでもう一枚中割りを追加する感覚で丁寧にプロンプトを書き込めばもっと精度があがると思います。 2年くらい動画生成の投稿してますがここまでAI動画のクオリティーがあがると思ってませんでした。 AIアニメを作っている人は、どんな方法で制作をしているかリプ欄で教えてくれると嬉しいです。 この動画はCPPのリリース前テストとなります。 HailuoAIというツールがリリースする前のテスト段階から、誰よりも生成していたらCPPに誘われて、ここまでずっとお世話になっていました。 一時期は話題にあがらず心配していましたが、一通り音声ツールを強化した後にHailuo02で巻き返してくれて安心しました。 Minimax Audioもアニメ制作に使えるクオリティーの音声が生成できるのでしっかり地盤固めてましたね。 あとは、どんなスタイルでもどんなキャラクターにも使える動画用リップシンク機能とかきたら嬉しいです。 効果音完璧につけてくれる機能とかあったら神!! とりあえず楽しいけどバトルアニメはもういいかな…笑 AIアニメ制作の最適解が何かは日々更新されますのでみんなで研究し続けましょう!! 次、何つくろっかな…🤔✨ ※エンドフレーム機能はCPPでβテスト中です!!🙏

SEIIIRU😈動画生成AIを使う映像クリエイター

30,190 views • 1 year ago

最近の動画の作り方 --- ① シーン別にTypelessで一気にしゃべり倒して指示書を書き起こす(↓の内容) ② これを元に、自分で作ったスキル使わせてFable 5.1に動画生成用プロンプトを書き起こさせる(今回は1分尺) ③ Seedream 5.0 Proで絵コンテに起こして内容精査 ④ 問題なさそうならSeedance 2.5で30秒単位で生成 --- これで出来たのが添付した30秒動画×2で、一発生成ポンだしです 指示通りかつ破綻も少なくてスムーズ! Typelessで喋って書き起こす時は、各カット毎に一回切るとタイポに気が付きやすくてよきです スキルは有効なカメラアングルやカット割り、演出、ライティング周りの情報を詰め込んである「ベクトル検索機能を組み込んだSQLite製ナレッジベース」を検索させて 各カットに最適な演出などを取らせるようにしています ・Typelessで喋った内容↓ ``` ブロック3を作り直したいので、私が以下に示す情景を元に組み立てなおしてください。 まず最初のカットでは、この山道の物陰からゆっくりとパンで移動し、ロランやイリスたちが山道を歩いているのをロングショットのバックショットで描きたいです。 カットが切り替わり、ロランを先頭に、その後ろにイリスが続いている構図です。構図としては上半身ショット想定で、フォーカスは先頭にいるロランに向いています。 ロランとイリスたちは数歩ほど歩いた後に、先頭のロランが周囲の異変を察知して立ち止まります。そして後方に向かって片手を伸ばし、イリスたちを制止するようなポーズで無言でバッと手を伸ばします。 それを見てイリスは歩みを止めて、ややびっくりしたような表情をします。 ロランはその後、周囲を左右見渡して、真剣な表情で周囲を警戒したような素振りを見せます。そして、イリスを制止していない方の手でロングソードを引き抜いて警戒します。 そしてカットが切り替わります。 この山道周囲の岩場を地面すれすれのローアングルから見上げた構図にしてください(要は煽り視点で上を見上げるような感じです)。 誰もいない岩場の上から、魔物の群れが次々と顔を出します。獣たちは黒い影で描かれており、その影の中に赤く光る目が映っている感じです。登場に合わせて獣たちの唸るような声を入れてください。 このカットを3回連続して描いてください。アングルは同じ(地面すれすれのローアングル)で、別々の岩場の影からこの獣たちの群れが大量に出てきているといった感じです。 それぞれとても短いショット。 カットが切り替わり、次はイリスの肩から上のクローズアップショットです。 イリスにフォーカスが向いていて周囲の背景はぼやけていますが、イリスたちを囲む岩場の上に、先ほどと同じように黒い影、そして赤く光る目の獣たちのシルエットが浮かんでいる感じです。 イリスは周囲を見渡して戸惑いの声を上げ、胸元に両手をぎゅっと握りしめて、戸惑うような表情で左右を見渡します。 短いショット。 カットが切り替わり、次はロランの顔のクローズアップショットです。 ロランは前方に剣を構えたまま、周囲に目を配りながら警戒している感じです。 短いショット。 そしてカットが切り替わり、何もない岩場の地面を最初に映したカットです。そこにフレームインしてくるように、一体の獣の足が入ってきます。 カットが切り替わり、最初は数体の獣の足元のみを映したアングルです。 そこからカメラはクレーンアップするように移動し、前方に映る複数体の獣たちが唸りながらカメラに向かって攻撃的な姿勢をとり、唸り声を上げながら警戒している様子を映してください。 そして地面スレスレのローアングルから、煽り視点で1匹の獣を映します。 1匹の獣は前方に向かって力強く吠えた後、一気に駆け出していきます。 そしてカットが切り替わり、駆け出した獣の POV ショットで描いてください。集中線を周囲に入れた状態で、獣視点でズームインしながら、前方にいるロランに向かって駆け出している感じです。 ロランは最初ロングショットで描かれており、後方には怯えているイリスも映っています。そして周囲には彼らを囲む岩場と、その上に大量の獣のシルエットと赤く光る目が映っている感じ。一瞬で距離を詰めてロランに向かってカメラはズームインしていきます。 そして剣を構えているロランの目に向かってズームインしていき、カットがすぐに切り替わります。 カットが切り替わる直前、ロランはその前方に構えている剣を振り下ろして、そのままカットが切り替わる感じにしてください。 振り下ろす際は、ロランの短い気合の入った声が入ります。 カットが切り替わると、ローアングルから見上げるような斜めの画角で、ロランが剣を振り下ろし1体の獣を斬り伏せているシーンが入ります。 獣は後方にのけぞるような感じで空中に浮いた状態で斬られていて、ロランは剣を振り下ろした姿勢で映っています。 ロランのすぐ後ろには、守られるような形でイリスが両手を胸の前で組んだ状態で映っています。彼らの背後には、周囲を囲むように高い岩場があり、その上には獣たちが映っているという構図です。 このカットは斬られた瞬間を描いているようなイメージで、斬られた獣は後方に向かってのけぞりながら動いており、ストップモーションのようにその瞬間を捉えたような演出になっています。 切られた瞬間の効果音と獣の短い悲鳴を入れてください その後、剣を構え直すロラン、そしてさらに怯えながらロランに近づくイリスを描きます。 その後、周囲の獣たちが次々と吠え出します。吠えている声を入れてください。 カットが切り替わり、短いモンタージュでイリスとロランたちを囲む岩場の上にいる獣たちが吠えている様子を描きます。今度はシルエットではなく、岩場の上の獣を明確に描きます。 横アングルから顔のクローズアップ気味で描いてください。1体の獣ずつにフォーカスしながら撮影し、その奥側にさらに複数いる獣たちをぼかしながら描いていくという感じです。 これを2カット連続で、別々の岩場にいる1体の獣にフォーカスしながら撮影してください。 常に獣たちの吠える声が入っています そしてさらにカットが切り替わり、次にロランたちと同じ地面の延長線にいる獣の群れたちが、次々と吠えながら駆け出していく様子を撮影します。 地面すれすれの煽り視点、ロングパースで描きます。 常に獣たちの吠える声が入っています カットが切り替わり、怯えているイリスの上半身ショットです。イリスは両手を胸の前でギュッと握りしめて、怯えている表情です。 すると、彼女が背負っている剣のうちの一本の赤い剣「ディルンウィン」が、以下のセリフを話します。 「イリス!ワシを抜けィ!!」 それを言われたイリスは、ハッとした表情で背負っているディルンウィンに手を伸ばします。 カットが切り替わり、ディルウィンを掴む瞬間のクローズアップショットを描きます。握られた快剣(かいけん)/怪剣のディルウィンはそのまま引き抜かれます。引き抜かれるにつれて、カメラは引き抜いている手にトラッキングしながら移動します。 引き抜かれたディルウィンをそのまま前方に掲げるイリスの顔のクローズアップシーンまでをセットで描いてください。 そして引き抜かれたディルウィンは赤く発光していき、炎のエフェクトをその刀身にみるみるうちにまとっていきます。そして引き抜かれたディルウィンを、イリスは自分の頭上に掲げます。 掲げると同時に、より一層、炎の揺らめきが強くなり、ディルウィンの剣先から炎のエフェクトが天に向かって伸びていきます。 この炎の光に照らされて、周囲はコントラストが強くなり明るく照らされます。そして、その剣を掲げているイリスは、髪の毛や服などを風で激しく揺らし、周囲に激しい暴風が吹き荒れます。 カットが切り替わります。柄を握られて頭上に掲げられているディルンウィンのクローズアップショットです。ディルンウィンの剣の柄部分を最初描きながら、そのままクレーンアップでディルンウィンの剣先に向けてカメラは移動していきます。そしてディルンウィンが以下のセリフを喋りながら、炎の揺らめき、そして炎のエフェクトを激しく描いてください。 「最後の人あばれじゃあーーーー!!」 カットが切り替わり、剣(ディルウィン)を頭上に掲げているイリス、そしてイリスの前方に映るロラン、彼らを取り囲む岩場の上にいる大勢の獣たち、彼女と同じ地面上で彼女に向かって走ってきている大勢の獣たちを描きます。 イリスたちはその360度周囲を獣たちに囲まれていて、獣たちとの距離はおよそ半径10m程度で描いてください。 ここでは引き抜かれているディルウィンのエフェクトを派手に描きたいという意図があるので、人物や獣たちは小さめに描くくらいのロングショットで描いてください。 周囲はディルウィンが放つ炎の光に照らされてコントラストが強くなっていて、影を落としています。光源はこのディルウィンの炎の柱だけです。 掲げられているディルウィンの剣先から、まっすぐ天に伸びるように炎の柱が放出されているという状態です。 そして一気にその炎の柱が周囲に広がり、炎の暴風というような感じで、イリスとロランたちを守るような形で炎の竜巻が発生します。 そしてそのまま外側に向けて放射状に広がっていき、炎の柱が周囲にいるすべての獣たちに向かって吹き荒れていくという感じです。 カットが切り替わり、その炎の暴風に当てられて燃えていく獣たちを、モンタージュで描いていってください。 炎の嵐に覆われて、獣たちはそのままシルエットがボロボロになるような形で、炎の渦の中に消えていきます。これを3カット続けて、モンタージュで描いてください。獣たちは暴風に覆われる際、短い悲鳴を上げます。 カットが切り替わります 炎の暴風が周囲に広がって、そのまま一気に晴れていく様子を描いてください。 炎の暴風が発生している間は、炎の光で周囲のコントラストが強く描かれていますが、暴風が一瞬でパンと晴れると、周囲には何事もなかったかのような風景が広がります。 そしてその後、岩場や地面に無数にいた獣たちが一切跡形もなくいなくなっている様子を描いてください。 カットが切り替わり、頭上にディルウィンを掲げた状態で、呆気に取られて口をポカーンと開けて驚いているイリスを描いてください。 そして、イリスは気にとられながら、頭上に輝いているディルミンをゆっくりと眼前に下ろしてきて見つめます。 そしておろしながら、ディルウィンが以下のセリフを喋ります。 「はっはっは! 見たかイリス、ワシのさいごのブユウデンじゃ!」 イリスはそれを受けて、はにかむようにリルウィンに笑いかけます。 このカットはイリスの肩から上ぐらいのクローズアップショットで描いてください。 ロングソードを構えて警戒していたロランの上半身ショットを最後に描きます。 ロランはわずかに口角を上げて笑いながら、そのまま目を閉じ、そして構えていた剣を腰の鞘の中にしまいます。 ```

松丸 彗吾(keigo matsumaru)

24,656 views • 1 month ago