NOBU's banner
NOBU's profile picture

NOBU

@nbykos • 26,139 subscribers

AI Animation Creator 著書 『「作りたい」をカタチにする動画生成AI』 https://t.co/6u811ynqv4 CPP: Kling / Hailuo / TapNow / CapCut

Shorts

Grok Imagineが日々進化している スタイルを保持する力が上がってる

Grok Imagineが日々進化している スタイルを保持する力が上がってる

316,427 views

Klingの動きをSeedance2に持ってくる実験 Kling3で良い動きの動画を作る ↓ Gemini Omniでマネキン化 （これをしないとスタイルの細部まで模倣される） ↓ Seedance2でモーション参照 マネキンで再現できていない部分はプロンプトで代替していますが、そこが固くなってしまうのが課題です。

Klingの動きをSeedance2に持ってくる実験 Kling3で良い動きの動画を作る ↓ Gemini Omniでマネキン化 （これをしないとスタイルの細部まで模倣される） ↓ Seedance2でモーション参照 マネキンで再現できていない部分はプロンプトで代替していますが、そこが固くなってしまうのが課題です。

423,084 views

中途半端にアニメ風のキャラクターと実写を混ぜると、頭のサイズの違いから微妙な違和感から気味悪さを感じてしまう。背景モブも同じ世界の住人にすることで緩和しましょう。 それはそれとして、Klingの空間描写能力がすごい。

中途半端にアニメ風のキャラクターと実写を混ぜると、頭のサイズの違いから微妙な違和感から気味悪さを感じてしまう。背景モブも同じ世界の住人にすることで緩和しましょう。 それはそれとして、Klingの空間描写能力がすごい。

543,529 views

Wan 3.0 が少しわかってきました。 2DアニメならH3より向いている気がします。

Wan 3.0 が少しわかってきました。 2DアニメならH3より向いている気がします。

38,549 views

kawaii dance / grok

kawaii dance / grok

49,206 views

ダンスアニメーションの作り方には 1. プロンプトのみ 2. 動画のモーション参照 というのが有名だけど、実は第三の手法があります。 それは、 3. ダンス手順の資料画像 これを参照に渡して作るといい感じに動いてくれます。 プロンプトより想定通りに動くし、動画参照よりコストが安くなる。

ダンスアニメーションの作り方には 1. プロンプトのみ 2. 動画のモーション参照 というのが有名だけど、実は第三の手法があります。 それは、 3. ダンス手順の資料画像 これを参照に渡して作るといい感じに動いてくれます。 プロンプトより想定通りに動くし、動画参照よりコストが安くなる。

128,227 views

Grokアプリでも参照生成が使えるようになっていたので早速試しました。 結論としてはfal版と比べて遜色ないです。 Seedance2やH3に比べたら劣るけど、スタイル選択をミスらなければ問題なし。 何よりもサブスクで使えるのが良いです！ 入門者向けです。

Grokアプリでも参照生成が使えるようになっていたので早速試しました。 結論としてはfal版と比べて遜色ないです。 Seedance2やH3に比べたら劣るけど、スタイル選択をミスらなければ問題なし。 何よりもサブスクで使えるのが良いです！ 入門者向けです。

66,312 views

動画生成AIによるアニメーションが2Dでも3Dでもない表現に到達しつつある。 完全な2Dではないけど、3Dでもない。 鼻や顔の輪郭の処理は2Dっぽいけど、動きは3Dっぽい。 2Dっぽいアートスタイルを維持できる。 不思議な感じだ。 Vidu Q2

動画生成AIによるアニメーションが2Dでも3Dでもない表現に到達しつつある。 完全な2Dではないけど、3Dでもない。 鼻や顔の輪郭の処理は2Dっぽいけど、動きは3Dっぽい。 2Dっぽいアートスタイルを維持できる。 不思議な感じだ。 Vidu Q2

218,806 views

動画生成AIのRunwayを用いて縦型ダンス動画の作り方を解説したnoteを書きました。 以下のような画像と動画を作れます。左側の動画はプロンプトをそのまま使用した一発出しです。 問題があるとしたら記事がクソ長いことです。

動画生成AIのRunwayを用いて縦型ダンス動画の作り方を解説したnoteを書きました。 以下のような画像と動画を作れます。左側の動画はプロンプトをそのまま使用した一発出しです。 問題があるとしたら記事がクソ長いことです。

382,345 views

Sora2 Proで3D系の描写をやらせると動きがきめ細かく美しくなる。 - 植物の動き - ギアの動き - 水の動き この辺りの品質が明らかに上がっている。 映像の品質が上がるのではなくて、物理のシミュレーション能力（リアリティ？）が向上するのかもしれない。

Sora2 Proで3D系の描写をやらせると動きがきめ細かく美しくなる。 - 植物の動き - ギアの動き - 水の動き この辺りの品質が明らかに上がっている。 映像の品質が上がるのではなくて、物理のシミュレーション能力（リアリティ？）が向上するのかもしれない。

201,951 views

Seedance2 (Hailuo) 480p ↓ Upscale (Topaz Precise Starlight 2.5)

Seedance2 (Hailuo) 480p ↓ Upscale (Topaz Precise Starlight 2.5)

62,749 views

動きという観点で言えば、SeedanceよりKlingの方が好き。 動かすために3Dに寄せているとはいえ、動きそのものに魅力があるんですよね。

動きという観点で言えば、SeedanceよりKlingの方が好き。 動かすために3Dに寄せているとはいえ、動きそのものに魅力があるんですよね。

61,393 views

AIピクセルアートアニメーションに可能性を感じる Seedance2 めちゃくちゃに動いても許される感じもあるし、相性良いかもしれない。

AIピクセルアートアニメーションに可能性を感じる Seedance2 めちゃくちゃに動いても許される感じもあるし、相性良いかもしれない。

65,481 views

Seedance2を使い始めた皆さまへ プロンプトはしっかり書きましょう 適当に書くと立派なクソ動画が生成されます

Seedance2を使い始めた皆さまへ プロンプトはしっかり書きましょう 適当に書くと立派なクソ動画が生成されます

87,882 views

ギター練習 by Runway

ギター練習 by Runway

237,493 views

Grokの動画生成時に 同じ画像を2枚参照させると キャラクターデザインの崩れが減ります 2枚入れると参照生成に切り替わる、というのが大きいかも。 これでしょぼいアニメキャラクターになる現象を抑制できます。

Grokの動画生成時に 同じ画像を2枚参照させると キャラクターデザインの崩れが減ります 2枚入れると参照生成に切り替わる、というのが大きいかも。 これでしょぼいアニメキャラクターになる現象を抑制できます。

79,498 views

Seedance2でこれだけ動かせることがわかるとVidu使わなくなりそう （検証のため、わざと大袈裟に動かしてます）

Seedance2でこれだけ動かせることがわかるとVidu使わなくなりそう （検証のため、わざと大袈裟に動かしてます）

49,774 views

Seedance2.5

Seedance2.5

20,618 views

MiniMax H3 Max Turbo Grok Imagineのi2vより良い可能性が出てきた

MiniMax H3 Max Turbo Grok Imagineのi2vより良い可能性が出てきた

17,758 views

💡 動画生成AIは余白で動きを決める 🎥 左右の動画を見比べてみましょう。 右のこぢんまりとした動きに対して、左のキャラは身体全体を使った動きをしてます。 実はこの二つの動画「同一プロンプト・同一素材」で生成してます。 なら違いは何か？左の素材画像に対して余白を追加しているのです。 余白の分だけ、キャラクターの動く余地が生まれます。同じプロンプトなのに、より大きい動きが可能になります。逆に動きが大きい場合は、対象キャラクターをフレームギリギリまで近づけることで動きを抑制できます。 もちろんプロンプトでも動きを調整できます。しかし、動きのポテンシャルは余白の有無で決まっているように感じるのです。 以下は優先度の仮説です 1. 動かすだけの余白があるか（フレームとキャラクターの比率=提供画像） 2. その中でどれだけ動かすか（プロンプト） 個人的にはかなり本質的な発見です。 最終的なショットと生成に相応しいショットが異なることを示すからです。このギャップを認識していないと、動画生成AIから十分な性能を引き出せないことになります。 あくまでも生成用にショットサイズを調整して出力、その結果を後でトリミング＆アップスケールで編集に回す、という工夫が必要かもしれません。 生成AIは実写やアニメと異なり、アクター/モデルとフレームの関係が逆転しています。フレームが先で、その中で初めて演技もキャラクターも生成されるのです。この違いを認識することが重要なのではないかと思いました。

💡 動画生成AIは余白で動きを決める 🎥 左右の動画を見比べてみましょう。 右のこぢんまりとした動きに対して、左のキャラは身体全体を使った動きをしてます。 実はこの二つの動画「同一プロンプト・同一素材」で生成してます。 なら違いは何か？左の素材画像に対して余白を追加しているのです。 余白の分だけ、キャラクターの動く余地が生まれます。同じプロンプトなのに、より大きい動きが可能になります。逆に動きが大きい場合は、対象キャラクターをフレームギリギリまで近づけることで動きを抑制できます。 もちろんプロンプトでも動きを調整できます。しかし、動きのポテンシャルは余白の有無で決まっているように感じるのです。 以下は優先度の仮説です 1. 動かすだけの余白があるか（フレームとキャラクターの比率=提供画像） 2. その中でどれだけ動かすか（プロンプト） 個人的にはかなり本質的な発見です。 最終的なショットと生成に相応しいショットが異なることを示すからです。このギャップを認識していないと、動画生成AIから十分な性能を引き出せないことになります。 あくまでも生成用にショットサイズを調整して出力、その結果を後でトリミング＆アップスケールで編集に回す、という工夫が必要かもしれません。 生成AIは実写やアニメと異なり、アクター/モデルとフレームの関係が逆転しています。フレームが先で、その中で初めて演技もキャラクターも生成されるのです。この違いを認識することが重要なのではないかと思いました。

173,005 views

Videos

LIVE
1.2k

Anya Rossi

sweetdream.ai

SweetDream.aiSponsored•Livecam
Streaming Now

Watch Anya Live

Anya is streaming live right now! Join her private show and enjoy exclusive content.

HD live stream
Exclusive private shows
1.2k viewers online

Free preview available • Premium content

アニメ×ドキュメンタリースタイルでMVを作りました。 アニメに特化した動画生成モデル「V4」を使えば、手持ちカメラ風でも、キャラクターや描画が崩れません。他モデルだと厳しい描写が、素直に表現できて感動しました。 使用ツールの詳細はスレッドに👇🧵 #PixAIStudio PixAI
1:45
nbykos's profile picture

アニメ×ドキュメンタリースタイルでMVを作りました。 アニメに特化した動画生成モデル「V4」を使えば、手持ちカメラ風でも、キャラクターや描画が崩れません。他モデルだと厳しい描写が、素直に表現できて感動しました。 使用ツールの詳細はスレッドに👇🧵 #PixAIStudio PixAI

NOBU

20,877 views • 3 days ago

オフィスの日常 A Typical Day at the Office
0:43
nbykos's profile picture

オフィスの日常 A Typical Day at the Office

NOBU

869,037 views • 7 months ago

だいぶ納得できるスタイルに到達しました シンプルなデザインかつ2.5Dなので都合の悪い時はいつでも3D化で対処できる このデザインとスタイルならモデルを跨いでも機能するはず キャラクター生成: niji7 → Nano Banana Pro 動画: Vidu 音楽: Suno
0:59
nbykos's profile picture

だいぶ納得できるスタイルに到達しました シンプルなデザインかつ2.5Dなので都合の悪い時はいつでも3D化で対処できる このデザインとスタイルならモデルを跨いでも機能するはず キャラクター生成: niji7 → Nano Banana Pro 動画: Vidu 音楽: Suno

NOBU

703,144 views • 8 months ago

Tesseractを使用してマスク→色トレス化→軽い撮影処理を行いました。 マスクは結構ズレがちだったんですが「1フレームずつ調整しろ」というパワハラをしたら力技で解決してくれた。AIすごい。
0:22
nbykos's profile picture

Tesseractを使用してマスク→色トレス化→軽い撮影処理を行いました。 マスクは結構ズレがちだったんですが「1フレームずつ調整しろ」というパワハラをしたら力技で解決してくれた。AIすごい。

NOBU

27,194 views • 11 days ago

動画理解と操作はGemini (3.8 Flash) が強い。 15秒の動画5本分を丸投げの自動編集です。 向きや要素、リズム、さらには注視点を予測してカッティングしてくれます。 BGMにも合わせてくれる。
0:43
nbykos's profile picture

動画理解と操作はGemini (3.8 Flash) が強い。 15秒の動画5本分を丸投げの自動編集です。 向きや要素、リズム、さらには注視点を予測してカッティングしてくれます。 BGMにも合わせてくれる。

NOBU

22,898 views • 18 days ago

Seedance2.5はディレクター能力を低下させたのかと思ったけど全然そんなことなかった。むしろ向上している。演出お任せでも普通に機能する。 では何が邪魔しているのかというと、参照である。 他の人も言っているけど参照強度が上がってしまい、余計なイメージボードや設定資料があるとそれに引っ張られてスタイルも構図も自由度が失われる。 最低限の個数＋プロンプトの方がうまく行きやすい。 具体的なイメージを持てないシーンであれば、展開のアウトラインだけ渡して任せてしまうのも手だと思う。 参照50個も使えるのに、皮肉な状況になってる。
0:20
nbykos's profile picture

Seedance2.5はディレクター能力を低下させたのかと思ったけど全然そんなことなかった。むしろ向上している。演出お任せでも普通に機能する。 では何が邪魔しているのかというと、参照である。 他の人も言っているけど参照強度が上がってしまい、余計なイメージボードや設定資料があるとそれに引っ張られてスタイルも構図も自由度が失われる。 最低限の個数＋プロンプトの方がうまく行きやすい。 具体的なイメージを持てないシーンであれば、展開のアウトラインだけ渡して任せてしまうのも手だと思う。 参照50個も使えるのに、皮肉な状況になってる。

NOBU

70,523 views • 2 months ago

Manus 2.0 の動画制作能力がヤバい キャラクターとコンセプトだけ伝えて、あとは丸投げ。可愛いキャラクターのクライムアクションが出来上がり。 使用クレジットはたったの1489で、編集済みのレベルの高い動画が完成する。
1:30
nbykos's profile picture

Manus 2.0 の動画制作能力がヤバい キャラクターとコンセプトだけ伝えて、あとは丸投げ。可愛いキャラクターのクライムアクションが出来上がり。 使用クレジットはたったの1489で、編集済みのレベルの高い動画が完成する。

NOBU

12,780 views • 11 days ago

#くろねこおばけ 留守番中のクロネコと遊んでくれる何かがいるらしい・・・ メインツール: TapNow TapNow 日本公式（タップナウ） 動画: Seedance2.5 画像: ChatGPT (gpt-image-2) / Grok Imagine Image 2.0 編集: Davinci Resolve BGM: Suno
2:09
nbykos's profile picture

#くろねこおばけ 留守番中のクロネコと遊んでくれる何かがいるらしい・・・ メインツール: TapNow TapNow 日本公式（タップナウ） 動画: Seedance2.5 画像: ChatGPT (gpt-image-2) / Grok Imagine Image 2.0 編集: Davinci Resolve BGM: Suno

NOBU

27,536 views • 1 month ago

Escape from ... Seedance2
0:27
nbykos's profile picture

Escape from ... Seedance2

NOBU

62,554 views • 5 months ago

AIに丸投げ→一時間で完成した自動生成AIアニメ 以下のツールで実現しました ・Grok 4.6 ・Grok Imagine (Grok Build) ・Gemini 3.8 flash ・Seed Audio ・Hyper frames Grok Imagine の参照生成性能が上がったこと、Gemini 3.8 flashの動画理解力が高いことで実現。 編集の不自然な点は少ないと思うが、間違いなくflashの性能向上のおかげです。
0:56
nbykos's profile picture

AIに丸投げ→一時間で完成した自動生成AIアニメ 以下のツールで実現しました ・Grok 4.6 ・Grok Imagine (Grok Build) ・Gemini 3.8 flash ・Seed Audio ・Hyper frames Grok Imagine の参照生成性能が上がったこと、Gemini 3.8 flashの動画理解力が高いことで実現。 編集の不自然な点は少ないと思うが、間違いなくflashの性能向上のおかげです。

NOBU

13,563 views • 29 days ago

オリジナルのショートアニメを作りました。 TapNowの「1万の並行宇宙」コンテストに合わせたものです。 アルミホイルペンギンがストーリーのキャラクターとして登場します🐧 シリーズ作品として今後もエピソードを追加予定です。 TapNowのコンテスト詳細はコメントに記載してます！
2:44
nbykos's profile picture

オリジナルのショートアニメを作りました。 TapNowの「1万の並行宇宙」コンテストに合わせたものです。 アルミホイルペンギンがストーリーのキャラクターとして登場します🐧 シリーズ作品として今後もエピソードを追加予定です。 TapNowのコンテスト詳細はコメントに記載してます！

NOBU

53,429 views • 5 months ago

そういえばGenieが日本でも使えるって知ってましたか。 Google AIのUltraプランに入っている方は使えます。 あらゆる場所の隙間を潜れるので、どこまでも行けるのが体験として面白かった。 ワールドモデルのワールドはオープンワールドのワールドだということを体験できる。
1:11
nbykos's profile picture

そういえばGenieが日本でも使えるって知ってましたか。 Google AIのUltraプランに入っている方は使えます。 あらゆる場所の隙間を潜れるので、どこまでも行けるのが体験として面白かった。 ワールドモデルのワールドはオープンワールドのワールドだということを体験できる。

NOBU

39,063 views • 3 months ago

Seedance2.5 30秒生成をすると、やっぱ15秒じゃ足りなかったんだなと思う。30秒あるとゆっくりとした動きを丁寧に追える。
0:22
nbykos's profile picture

Seedance2.5 30秒生成をすると、やっぱ15秒じゃ足りなかったんだなと思う。30秒あるとゆっくりとした動きを丁寧に追える。

NOBU

26,638 views • 2 months ago

ネコ戦士とネコドラゴンの戦い Seedance2
0:28
nbykos's profile picture

ネコ戦士とネコドラゴンの戦い Seedance2

NOBU

33,547 views • 3 months ago

自撮り水族館 SeedreamV4+Seedance+Wan2.2
0:30
nbykos's profile picture

自撮り水族館 SeedreamV4+Seedance+Wan2.2

NOBU

84,103 views • 1 year ago

ねこ戦士 Seedance2
0:31
nbykos's profile picture

ねこ戦士 Seedance2

NOBU

31,338 views • 4 months ago

明日のワークショップではこれを作ります
0:27
nbykos's profile picture

明日のワークショップではこれを作ります

NOBU

42,669 views • 6 months ago

朝からずっと int.lab さんのやつをどう再現するだろうと検証していたら、別の場所に着地した。 Hailuo (Seedance2)
0:34
nbykos's profile picture

朝からずっと int.lab さんのやつをどう再現するだろうと検証していたら、別の場所に着地した。 Hailuo (Seedance2)

NOBU

31,208 views • 4 months ago

Seedance2.5はイカれた動きをさせるのに最適です
0:20
nbykos's profile picture

Seedance2.5はイカれた動きをさせるのに最適です

NOBU

10,314 views • 1 month ago