Gemini Omni 使ってみました。 普通に作ろうとしたらこんな提案してきた！ 一発で動画生成+右上のワイプを別で生成して重ねてきたってことなのかな。 テロップや合成などの編集込みで生成できるのは嬉しい。 使い方によってはまたワークフローが変わりそうですね！

seedance2.0で生成してみました。初生成でこれだけ綺麗に生成できるとは思いませんでした。 モンスター遊園地が本当に存在するかのようなクオリティーで動きました。CapCutのアプリから生成して、そのまま編集できるのは便利ですね😃 #capcut生成ai #capcutjapandiscord CapCut.Japan PR

Fable 5 に動画を作らせてみました。 完全に思考停止で、全てお任せで動画を作ってみました。（Seedance2.0 16:9 480pは指示しました） 『15秒のワンショットアニメをt2vで作るとしたらどんなのがいいかな？』 なんか、プロットをゴニョゴニョ言ってましたけど、勿論、そんなものは全く読まずに 『じゃ、試しに作ってみて』... と言ったら出来上がった動画がこちらになります。 （一発、ポン出しです） この動画ははっきり言って、私が作ったものではありません。Fable 5が勝手に作りました。 正直なところ、どうなんですかね、これ？ みなさんどう思われますか？ Fable 5が勝手に作ったと思えば凄いような気はしますけど、みなさん、これ以上の動画を結構簡単に作っていますよね？ でも、Fable 5を使いこなせばもっと凄いものが作れるような気はします。 よし、もっと試してみるかと思った矢先、米政府の命によりFable 5は緊急停止してしまいました・・・ 続きはしばらくおあずけです・・・ ※私はHiggsfieldのMCPでClaudeに繋いでいるのでClaude上から直接、動画が生成できます。show more

seedance 2.0 omni、ちびキャラへのポーズ転移を試してみたら１発で成功。これまでの動画生成サービスではできなかったことなので、ローカル生成の数少ない優位がまた一つ失われてしまった…。

CapCutのGPTImage2でも生成できました。 i2vとOmni Referenceで生成した画像をつなげてみたのですが、どっちがいいんだろうか。単発生成の場合はそんなに差はないのかな。いずれの方式でもseedance特有の顔に近づように感じます。 #capcut生成ai CapCut.Japan

引き続きSeedance 2.0。 自分がNoteで公開している各種の画像付き小説には動画が付いているものがありますが、一部を除いて、当時の技術で生成可能だったレベルの動画を、チョロっとだけ試しに生成する程度でした。 技術が成熟してきたら、いずれは動画でのリメイクに取り組みたいという思いは常に持っていて、Sora2やSeedance 2.0のような技術レベル向上が見られた際に、試すようにしています。 「【MC Heroine】潜入捜査 - レッドの場合」... ということで、添付はレッドの物語の1シーンを、パイロット的にSeedance 2.0で生成してみたわけですが・・・ ヤバいなと思うのは、ちょっと試してみようか、と気軽に生成してこのクオリティが出てしまうと、「この次のシーンを」「前のシーンを」「ディテールをもっと改善したい」と、次々生成したくなるという中毒にハマるということですね。案の定、これを生成したあと、前後のシーンを引き続き付け加えたりしていますｗ このまま長い動画を作り始めてしまうと、いろいろ余裕がなくなりますので、適当なところで止めるつもりですが・・・ （Seedanceだけで作るのはコスト的にとても無理なので、動きの少ない場面はKling等を併用するようにしています） しかしSeedance 2.0は相変わらず顔参照のOK/NG判定基準がよくわからず、思わぬところでひっかかったりしますね。show more

AIでスポーツアニメ作る人は全員、Kling1.5Proのモーションブラシ使うべき（いる・・か・・？） Klingのモーションブラシ、複数のオブジェクトを意図する方向に動かせるんですが、その実力を発揮してもらおうとバスケさせてみました。 まずは試しにプロンプトで他の動画生成のやつで出力したものを。「ノールックパスして」と言ったんですが、なかなかカオスな状況になりがちでした。 満を持してモーションブラシを使ってみたら・・・成功！これはかなり良い！ちょっと３D化してるけど、Kling使う時は大体こうなると想定して作品をつくれば良いかなと。 #klingai

ついこないだまでみんな当たり前みたいに使ってたのにもはやロストテクノロジーと化している。たまにテープ巻き込んじゃうくらいで、当時これで困ったことなんかなかったし楽しい時代だった。時代の移り変わりが早すぎて正直最近は何がどうなろうがどうでもよくなってきてる

PR【こりゃすごい Topview Agent v2】 Topview（TOPVIEW（トップビュー）日本公式）のAgent v2に引用の動画を渡して、簡単な指示で続きのシーンを作るようお願いしてみたら、声・BGM・キャラクターの一貫性をそのまま引き継いで、自然なシーンを生成してくれた…これはちょっとびっくりしましたね。 Agent v2は1つの画面で続きのシーンを生成・編集できるのがかなり便利（1カットの生成は15秒までです）リプに繋げてみたフル動画を貼るので、ぜひ見てみてください。 #TopviewAI #Seedance2

GPT Image2のおかげで昔から何度も作っているLiquid Dressもだいぶリアル度高く生成できるようになりましたが、これを動画にした場合、かっこよくするのがまた難しい。センスなんでしょうね。まず引き出しが少ないので、GPTに自動でPromptを作成してもらったのですが、昔のMVのような仕上がり😇 #capcut生成ai CapCut.Japan

Soraは4月26日で終了らしいですね。 ちょっとだけでも生成しようと思ったのに、駆け込み需要で激混みしてるせいなのか全然生成できない… 終了日までこの状態だったら、これが最後の生成動画になっちゃうのか😂

この軽快なダンス、実はCodex 5.6で作りました。 上級者は「Mixamoを使った？」と思うかもしれませんが、アニメーションアセットは一切使っていません。 テキストで動きを指定しただけです。 使ったのは、オープンソースのテキストモーション生成。 Codexと組み合わせることで、ここまで自然に動かせました。 これをゲームのアニメーションに使ったり、動画生成AIに読ませたり・・夢が広がりますね。 また詳しいやり方は後日紹介します。

Grokでまた別のミックスプロレス物作ろうとしてたけど、やっぱ複数の人間が絡むととんでもない動画ばっかり作ってきて発狂しそうですよ😵‍💫 前はまだレートリミットがそこまで厳しくなくていっぱい作れたからたまにできた良作を繋げてたけど、今の状況ではなかなか厳しい😩

「ありがとう」って伝えたい人がたくさんいるようなので、なんちゃって画像作成ツールをAIくんと相談しながら用意してみたので、自由に使ってね。スマホでも使えるよ。背景に画像も指定できるよ。作ったやつは自由にしてOKだよ

ついに自動コンテキスト圧縮の無限ループが10時間以上続いて進んでる感がなかったので終わりにしました。 100時間やったしまあいいでしょう 完成したゲームはこんな感じで思ったよりちゃんとしたパズルゲームになってました。 ちなみにこの動画もストアページ風が自動で作られててその一部として自動で作られてました 10ステージしかなかったから増やす指示送ってみよう

Image2『キャラクター設定一発生成！』 ストーリーアニメをつくるとき 一貫した基準を作る必要があります。 それがキャラクターシートですが、 使い道で違うシートが必要になったりします。 たとえば、 全身を写すときに三面図はベターですが、 目のアップなどは顔メインのシートのほうがいいとか👀 とはいえ、いちいち作るのも、、、... という方向けのノウハウです！ Image2ではこのように同時生成の画像でしたら テキストのみでも一貫性を保ってくれます。 複数回にわたる生成ですと、たまにとても細かいところの一貫性が保たれず、 その修正で時間をとられてしまうこともありますが、 同時生成ですとその時間も節約できます！ 試してみるのはいかがでしょうか✨show more

昔やりたかったこと、今はジオメトリノードで実現できそうだな～と思い出して作成中。ジオメトリ統合ノードを使ってケージをオンにして編集しようとするとワイヤーフレームが見えなくなるのなんとかしたいな（仕様？）

メイキング的なやつです。 今回は、基本的なアニメーションの作り方である 『pose to pose』をAIでやったらどうなるか？ という試みでした🥹 結論から先に言うと 「まぁまぁ大変だし、AI時代のスピード感にはそぐわないだろうな」です。 ある程度、予想もしてましたが🤣... 今回は、コンテ、ラフ原を描いて(あるいは3Dで)、絵や動きを「ある程度」コントロールしたい人向けのフローなのかなと思います。 そういった方で、AIにまだ馴染みが無い方向けに、今度、もう少し詳細な、記事かnote書こうと思います。 ---------------------------------------------- ※pose to poseというは、 動きのキーとなるポーズ、主に動きの変化点などの絵を複数枚、先に用意して、後から、間の絵をうめていってアニメーションにする手法です。 キーとなるポーズや絵を、「キーフレーム」とか「原画」。間を埋めていく絵や作業などを「中割り」「動画」と言います。 ---------------------------------------------- 以下は、AI界隈の方向け、メイキングの簡易的な説明です。 端的にいうと、 先にラフ絵で動きのプランをつくり、 その絵を使って、キーフレームの絵を生成して、 あとはひたすらスタートエンドで生成。 です🥹 --------------- ①コンテ撮をつくる いわゆるアニメの原画よりは枚数少ないですが、 ラフな絵で、動きのキーとなる一連の絵を用意して、先に動きの流れをつくります。 --------------- ②キーフレームの作成 コンテ絵と、事前につくったキャラ絵をリファレンスにして、NanoBananaPro等で、各キーフレームの絵を生成＆加工します。 私の拙いラフ絵なので、結構ガチャりましたが、もう少し丁寧に描いた、アニメーターさんのラフ原とかだと、もう少し絵のコントロールが、できるんじゃないかなと思います。 タッチ線を入れたり、変身後の衣装に変えたりなどは、さらに２段階、３段階の生成が必要でした。 --------------- ③中割りの作成 キーフレームを順番に並べて、それぞれの間を、スタートエンドで、動画生成します。 今回使用したのは、 DomoAI official / Kling AI / Hailuo AI-MiniMax Hub の３つです。 主力はDomoAIで、3秒尺の生成ができるのと、割と単純な中割りになるのが良かったです。 逆に単純に割ってほしくない場合(例えば回転していて別のアングルが途中で入るとか)は、KlingやHailuoを使いました。 --------------- ④フレームの選定(コマ抜き) 生成された各動画をつないで、元々つくっていたコンテ撮のタイミングに合わせて、大胆に絵を抜いてきます。 極端なものだと、3秒(約72枚)生成して、その間の１枚しか使わない。みたいな感じですｗ あとはいわゆるタメツメの調整など --------------- ⑤撮影＆編集 別途用意した、イメージ流背のBGやエフェクト素材などと合わせてコンポジット。処理かけて、SEとBGM入れて完成です。 --------------- つまり、①と④の工程で、思いっきり、アニメーター的技能を使うことで、動きのキモはAIではなく、自分でやるということですね。 ◆メリットとしては - 動きや演技をあるていど自分でコントロールできる - ある程度積み上げながらの作業なので、部分的な修正が可能 - 溶けにくい など ◆一方デメリットは - 他のAIの手法に比べて、相当時間がかかる - クレジット消費も激しい - 色やキャラが、１カット内で安定しない （髪の毛の本数がかわったりなど、カットまたぐ分にはきにならないものでも、動きの途中で変わっちゃうので、結構目立つ） - 実景の空間でのカメラワークとかが混ざると、多分さらに難易度が上がる - コントロールに結局限界が(まだ)ある などなど、、、、 時間と手間がかかるけど、商業レベルの「品質」まで対応できるわけではない。しかも手描きアニメーターの上手い人なら、下手したら同じくらいの時間でできちゃうかもしれない。。。 ゆえに冒頭の結論に至るわけです🤣 -----------------------------------------show more

ぼくの着想の限界＝Codexの限界。 それくらいまーじでCodexでなんでもできる。 これアリエクで買ったやっすいMP3プレイヤー。 でもBluetoothの音飛びと操作性が悪くて放置してたんですよ。 だけど昨日急にシャワーしている時にエウレカして、 殻わりしてチップをCodexに見せたら見事に調査はじめて、 案内された通りにMacに接続しておいたら、今度はOSを吸い上げてバイナリを解析して該当しそうなところを書き換えたカスタムOS作ってくれていて、 最後に案内されていたコマンドを実行したら書き込みが始まって、 結果... 解決してしまったのよ・・・ Bluetoothの音飛びはなくなっていて、 動画わかりにくいんですが、元々←→ボタンでメニュー移動だったのを上下ボタンで選択できる直感的な操作に変えてくれています。（最初からそうして・・・笑） なんだろこの感覚、みなさんにこれで感動伝わりますかね？・・・やばいす、ほんとに・・・show more

blender生活 モデリングの合間にちょっと試したいことがあって、Unityいじっていました。以前購入していたPOTATOONというシェーダーを試しています。Warudoでも使えるし色々設定できてかなりきれいですね。まあ、使いこなせてはいないのですが・・・ #blender #Unity