NOBU's banner
NOBU's profile picture

NOBU

@nbykos23,537 subscribers

Agentic Creative Architect / AI Animation Creator 動画生成AIの入門書籍書きました 『「作りたいをカタチにする動画生成AI』 https://t.co/6u811ynYkC CPP: Kling / Vidu / Hailuo / TapNow / CapCut

Shorts

Klingの動きをSeedance2に持ってくる実験 Kling3で良い動きの動画を作る ↓ Gemini Omniでマネキン化 (これをしないとスタイルの細部まで模倣される) ↓ Seedance2でモーション参照 マネキンで再現できていない部分はプロンプトで代替していますが、そこが固くなってしまうのが課題です。

Klingの動きをSeedance2に持ってくる実験 Kling3で良い動きの動画を作る ↓ Gemini Omniでマネキン化 (これをしないとスタイルの細部まで模倣される) ↓ Seedance2でモーション参照 マネキンで再現できていない部分はプロンプトで代替していますが、そこが固くなってしまうのが課題です。

415,362 views

中途半端にアニメ風のキャラクターと実写を混ぜると、頭のサイズの違いから微妙な違和感から気味悪さを感じてしまう。背景モブも同じ世界の住人にすることで緩和しましょう。 それはそれとして、Klingの空間描写能力がすごい。

中途半端にアニメ風のキャラクターと実写を混ぜると、頭のサイズの違いから微妙な違和感から気味悪さを感じてしまう。背景モブも同じ世界の住人にすることで緩和しましょう。 それはそれとして、Klingの空間描写能力がすごい。

543,529 views

Seedance2 (Hailuo) 480p ↓ Upscale (Topaz Precise Starlight 2.5)

Seedance2 (Hailuo) 480p ↓ Upscale (Topaz Precise Starlight 2.5)

62,749 views

動きという観点で言えば、SeedanceよりKlingの方が好き。 動かすために3Dに寄せているとはいえ、動きそのものに魅力があるんですよね。

動きという観点で言えば、SeedanceよりKlingの方が好き。 動かすために3Dに寄せているとはいえ、動きそのものに魅力があるんですよね。

61,393 views

ダンスアニメーションの作り方には 1. プロンプトのみ 2. 動画のモーション参照 というのが有名だけど、実は第三の手法があります。 それは、 3. ダンス手順の資料画像 これを参照に渡して作るといい感じに動いてくれます。 プロンプトより想定通りに動くし、動画参照よりコストが安くなる。

ダンスアニメーションの作り方には 1. プロンプトのみ 2. 動画のモーション参照 というのが有名だけど、実は第三の手法があります。 それは、 3. ダンス手順の資料画像 これを参照に渡して作るといい感じに動いてくれます。 プロンプトより想定通りに動くし、動画参照よりコストが安くなる。

126,354 views

AIピクセルアートアニメーションに可能性を感じる Seedance2 めちゃくちゃに動いても許される感じもあるし、相性良いかもしれない。

AIピクセルアートアニメーションに可能性を感じる Seedance2 めちゃくちゃに動いても許される感じもあるし、相性良いかもしれない。

64,768 views

Seedance2でこれだけ動かせることがわかるとVidu使わなくなりそう (検証のため、わざと大袈裟に動かしてます)

Seedance2でこれだけ動かせることがわかるとVidu使わなくなりそう (検証のため、わざと大袈裟に動かしてます)

48,926 views

これ系、大量にテストしてました。 結論は、モデルと相性の良いデザインの参照素材を用意できるかどうかに帰着した。 Seedance2

これ系、大量にテストしてました。 結論は、モデルと相性の良いデザインの参照素材を用意できるかどうかに帰着した。 Seedance2

26,501 views

動画生成AIによるアニメーションが2Dでも3Dでもない表現に到達しつつある。 完全な2Dではないけど、3Dでもない。 鼻や顔の輪郭の処理は2Dっぽいけど、動きは3Dっぽい。 2Dっぽいアートスタイルを維持できる。 不思議な感じだ。 Vidu Q2

動画生成AIによるアニメーションが2Dでも3Dでもない表現に到達しつつある。 完全な2Dではないけど、3Dでもない。 鼻や顔の輪郭の処理は2Dっぽいけど、動きは3Dっぽい。 2Dっぽいアートスタイルを維持できる。 不思議な感じだ。 Vidu Q2

218,806 views

Seedance2を使い始めた皆さまへ プロンプトはしっかり書きましょう 適当に書くと立派なクソ動画が生成されます

Seedance2を使い始めた皆さまへ プロンプトはしっかり書きましょう 適当に書くと立派なクソ動画が生成されます

87,882 views

Sora2 Proで3D系の描写をやらせると動きがきめ細かく美しくなる。 - 植物の動き - ギアの動き - 水の動き この辺りの品質が明らかに上がっている。 映像の品質が上がるのではなくて、物理のシミュレーション能力(リアリティ?)が向上するのかもしれない。

Sora2 Proで3D系の描写をやらせると動きがきめ細かく美しくなる。 - 植物の動き - ギアの動き - 水の動き この辺りの品質が明らかに上がっている。 映像の品質が上がるのではなくて、物理のシミュレーション能力(リアリティ?)が向上するのかもしれない。

201,885 views

動画生成AIのRunwayを用いて縦型ダンス動画の作り方を解説したnoteを書きました。 以下のような画像と動画を作れます。左側の動画はプロンプトをそのまま使用した一発出しです。 問題があるとしたら記事がクソ長いことです。

動画生成AIのRunwayを用いて縦型ダンス動画の作り方を解説したnoteを書きました。 以下のような画像と動画を作れます。左側の動画はプロンプトをそのまま使用した一発出しです。 問題があるとしたら記事がクソ長いことです。

382,345 views

Seedance2 Test

Seedance2 Test

17,852 views

Grokの動画生成時に 同じ画像を2枚参照させると キャラクターデザインの崩れが減ります 2枚入れると参照生成に切り替わる、というのが大きいかも。 これでしょぼいアニメキャラクターになる現象を抑制できます。

Grokの動画生成時に 同じ画像を2枚参照させると キャラクターデザインの崩れが減ります 2枚入れると参照生成に切り替わる、というのが大きいかも。 これでしょぼいアニメキャラクターになる現象を抑制できます。

77,947 views

ギター練習 by Runway

ギター練習 by Runway

237,318 views

【動画生成AIで「デザイン選び」が超重要な理由】 この動画は、複数のキャラクターを船に乗せた比較テストです。 デザインやスタイルが違うだけで、 ・キャラクターの動き ・船の速度 ・カメラワーク これらに違いが生まれます。 (ちなみにプロンプトはほぼ同じです) つまり何を選ぶかで 「AIから引き出せる能力」 が変わります。 やりたい表現で、 やりたい動きを引き出せるとは限りません。 AIにおいてデザインは、 視覚的な課題だけでなく 「動かす前提条件」 でもあるのです。 この点を理解しておくと、 AIを使いこなせるようになります。 --- このテストは参照素材がキャラクターごとで異なり、舞台とプロンプトはほぼ同じ。 使用ツール: Vidu Q2

【動画生成AIで「デザイン選び」が超重要な理由】 この動画は、複数のキャラクターを船に乗せた比較テストです。 デザインやスタイルが違うだけで、 ・キャラクターの動き ・船の速度 ・カメラワーク これらに違いが生まれます。 (ちなみにプロンプトはほぼ同じです) つまり何を選ぶかで 「AIから引き出せる能力」 が変わります。 やりたい表現で、 やりたい動きを引き出せるとは限りません。 AIにおいてデザインは、 視覚的な課題だけでなく 「動かす前提条件」 でもあるのです。 この点を理解しておくと、 AIを使いこなせるようになります。 --- このテストは参照素材がキャラクターごとで異なり、舞台とプロンプトはほぼ同じ。 使用ツール: Vidu Q2

85,327 views

参考プロンプトを元に作りました。 こりゃ良いです! 動画はKlingで生成しました。 リアル背景の時はGrok/Vidu以上に性能を発揮する印象です。

参考プロンプトを元に作りました。 こりゃ良いです! 動画はKlingで生成しました。 リアル背景の時はGrok/Vidu以上に性能を発揮する印象です。

88,301 views

カット一つ一つは全然難しくない。しかし、編集のテンポとセリフと音が自然なので高品質に見える。これがSoraのすごいところ。 と同時に、動画作りのヒントがここにある。 ショット内でよく動くことと、良い動画作品になることはイコールではない。

カット一つ一つは全然難しくない。しかし、編集のテンポとセリフと音が自然なので高品質に見える。これがSoraのすごいところ。 と同時に、動画作りのヒントがここにある。 ショット内でよく動くことと、良い動画作品になることはイコールではない。

92,765 views

Seedance2の検証 ダンスの振り付けの資料をGPT-Image-2で作成して、それと合わせて簡単なプロンプトで動かしています。 資料の指示内容をなぜか口に出しながら踊っているので、どれが何の動きがわかりやすいです。 参照した資料はコメントに👇

Seedance2の検証 ダンスの振り付けの資料をGPT-Image-2で作成して、それと合わせて簡単なプロンプトで動かしています。 資料の指示内容をなぜか口に出しながら踊っているので、どれが何の動きがわかりやすいです。 参照した資料はコメントに👇

33,094 views

まともに銃をリロードできるモデルはまだ存在しないみたいだが、その中でも異色のリロード動作を見せるのがSeedanceです。

まともに銃をリロードできるモデルはまだ存在しないみたいだが、その中でも異色のリロード動作を見せるのがSeedanceです。

97,917 views

Videos

nbykos's profile picture

ねこ戦士 Seedance2

NOBU

30,834 views • 1 month ago

nbykos's profile picture

Escape from ... Seedance2

NOBU

62,554 views • 2 months ago

No more content to load