ジェフ千葉大敗の痛みを忘れようとMinimax-H3で閃光のハサウェイのギギ・アンダルシアを動画生成してみた。Turbo Lora有で4Stepだと日本語の音声は厳しいですが8StepならLTXよりもかなり良質ですね。引きの構図では顔の描画が雑になりAI絵っぽさが出てしまうのはSDXLと同じですね SFW #GigiAndalsia

ローカルのMiniMax H3のR2Vで、8秒間の1080p級（アップスケール）の動画を8分弱で生成する方法を詰めてみました。 RTX 5090で8秒・1920×1056の動画を480p生成160秒＋アップスケール310秒の合計7分50秒でできました。 ByteDanceのアップスケーラもかなり良いのですが、階調がおかしくなったり、変なトランジションが入ることがあります。 今回のlatent Upscalerによるものは元々の動画生成の際のlatentの段階で拡大しているので、仕組みが違うようです。 元のワークフローだと、拡大後のrefineが生成と同じ25stepsで回るようだったので、そこだけR2V用の蒸留LoRA（minimax_h3_ref2v_turbo_4step_v0.1_comfyui_bf16）に変えました。4stepsと8stepsで試しましたが、秒数の違い（250秒くらい違う）の割に差が自分にはわかりませんでした。 蒸留LoRA... 4stepsは「一から絵を描かせるのはキツいけど、細部を修正するくらいなら全然できる」という感じです。 もうひとつ大切なのは、アップスケールの時のconditioningを生成時と同じものに付け直すのが効いたという点です。 標準だと480p用の条件を引き伸ばして使うそうで劣化しているらしいです（Claude Codeが言うには）。 そこで同じ参照を目標解像度で付け直すと、ちゃんとリファレンスどおりになります。 例えば、今回の動画ですと、眉毛のところの描写がキャラクターのリファレンス通りになっています。1枚目の比較画像で分かると思います。 ちなみにSeedance 2.5のオムニリファレンスだと、8秒間の動画をリファレンス8枚付きで生成しようとすると936クレジットでした。スタンダードプラン5,200円で5,775クレジットなので、1本あたり約843円という計算になります。 ローカルのH3はさすがにSeedance 2.5と同レベルとは言えませんし、Seedanceが絶対に必要な場面は存在していますが、とはいえ高解像度のものがローカルで手軽に出せるのはいいですね。show more

Grok Imagine の画像生成で新たに「画質モード」が入ってました。Web版、Android版で確認しました。 新しいのが「Quality（画質）」、今までのは「Speed（速度）」みたいです。Android版で「画像生成Proモード」というスイッチもあるので以前からAPI等で既に提供されている「Image Pro」な気がします、たぶん。 Super Grok以上で使用可能、無料で使用できないのは確認済み、Grok Liteは未確認です。 １・２番目が「Quality（画質）」のサンプル、３番目は操作手順の動画になります。... 私は女性の画像しか生成しないのでその視点での個人的な意見ですが、「Quality（画質）」モードの顔立ちの雰囲気がImagen4や🍌に寄った気がしています。それとプロンプトをしっかり書かないと同じような見た目の画像が生成されがちな気がします。 これまでの「Speed（速度）」と雰囲気が違うの気がするので、上位互換というよりは別モデルとして使い分けるのが良いかもしれませんね🧐show more

今は動画はseedanceで持ち切りですが、個人的にはAI美女界隈はKLINGがいいのかなって思ってます。Omniでしっとりとしたドラマも作れますし、大量のクレジットを必要とするMVを個人レベルで生成するのもお財布的には優しいですし。リアル系の参照が今のところ正攻法ではできないサービスもありますし。あとは個人的な顔の好みもありますかね😌 昨日のseedanceのダンスPrompt、参照画像をそのままKLINGで生成しています。皆さんの好みはどうでしょうか。 #KLING3

Hailuo H3とSeedance 2.5で、Music Videoのワンシーンを比較してみました😃 参照画像、参照音楽、Promptはほぼ同じものを使用しています。 本来はH3とSeedance 2.5でPromptの書き方も変えた方が良さそうですが、今回はあえて同じ条件で比較。 画像生成、動画生成ともにPollo aiを使っています。... 動画内に出しているロゴもPollo aiで生成していて、その際は女性のReference画像も一緒に参照させて、全体の雰囲気が揃うようにしてみました。 今回かなり良かったのがHailuo H3のReference性能とLip Sync。 腰上くらいの比較的アップな画像をReferenceにすると、顔もほとんど崩れず、かなり自然に歌ってくれました。高速な歌詞にもちゃんと追従していて、Lip Syncだけ見ると有料の専用サービスと比べてもかなり良いところまで来ている印象です。 対してSeedance 2.5は、今回は出だしでうまく歌ってくれませんでした。 ただ、肌の質感や細かい表情の変化、顔の生っぽさみたいな部分はSeedance 2.5の方が一段リアルに感じます。このあたりはやっぱり強いですね。 今回はアップ中心で、激しいアクションや大きなカメラ移動、引きの映像もほとんどないので、Seedance 2.5の良さをあまり活かせていない比較だったかもしれません。逆にそのあたりはH3が少し弱い印象もあるので、今回はややH3有利な条件です。 それにしてもH3は生成コストがかなり安いので、このReference性能とLip Syncまで考えるとコスパはすごいですね。クオリティの差はあると思いますが、H3はローカルという選択肢もでてきましたしね。 Pollo AI 動画生成のPromptなどはコメントに記載します😌show more

引き続きSeedance 2.0。 自分がNoteで公開している各種の画像付き小説には動画が付いているものがありますが、一部を除いて、当時の技術で生成可能だったレベルの動画を、チョロっとだけ試しに生成する程度でした。 技術が成熟してきたら、いずれは動画でのリメイクに取り組みたいという思いは常に持っていて、Sora2やSeedance 2.0のような技術レベル向上が見られた際に、試すようにしています。 「【MC Heroine】潜入捜査 - レッドの場合」... ということで、添付はレッドの物語の1シーンを、パイロット的にSeedance 2.0で生成してみたわけですが・・・ ヤバいなと思うのは、ちょっと試してみようか、と気軽に生成してこのクオリティが出てしまうと、「この次のシーンを」「前のシーンを」「ディテールをもっと改善したい」と、次々生成したくなるという中毒にハマるということですね。案の定、これを生成したあと、前後のシーンを引き続き付け加えたりしていますｗ このまま長い動画を作り始めてしまうと、いろいろ余裕がなくなりますので、適当なところで止めるつもりですが・・・ （Seedanceだけで作るのはコスト的にとても無理なので、動きの少ない場面はKling等を併用するようにしています） しかしSeedance 2.0は相変わらず顔参照のOK/NG判定基準がよくわからず、思わぬところでひっかかったりしますね。show more

Fable 5 に動画を作らせてみました。 完全に思考停止で、全てお任せで動画を作ってみました。（Seedance2.0 16:9 480pは指示しました） 『15秒のワンショットアニメをt2vで作るとしたらどんなのがいいかな？』 なんか、プロットをゴニョゴニョ言ってましたけど、勿論、そんなものは全く読まずに 『じゃ、試しに作ってみて』... と言ったら出来上がった動画がこちらになります。 （一発、ポン出しです） この動画ははっきり言って、私が作ったものではありません。Fable 5が勝手に作りました。 正直なところ、どうなんですかね、これ？ みなさんどう思われますか？ Fable 5が勝手に作ったと思えば凄いような気はしますけど、みなさん、これ以上の動画を結構簡単に作っていますよね？ でも、Fable 5を使いこなせばもっと凄いものが作れるような気はします。 よし、もっと試してみるかと思った矢先、米政府の命によりFable 5は緊急停止してしまいました・・・ 続きはしばらくおあずけです・・・ ※私はHiggsfieldのMCPでClaudeに繋いでいるのでClaude上から直接、動画が生成できます。show more

初心者が楽しむ動画生成 画像を取り込んで動かしてみる Pollo AI 日本公式 様のMiniMax H3で 今回は画像から動画に 生成スピードがとにかく早いですね... 今回は同じ画像から 1本目がMiniMax H3(2K) 2本目がMiniMax H3 Max(780) やっぱり2Kは綺麗ですが 一定のクオリティを担保しながらの Maxの生成速度はやばいです！show more

MiniMax H3を使って、同じ内容のプロンプトを「英語」と「そのまま日本語に翻訳したもの」で生成して比較してみました。 参照画像はリプ欄の3枚。 映像内の文字はすべてプロンプトから生成しています。 比較してみると、構図やキャラクター、全体の演出はかなり近い結果に。 文字もどちらもかなり再現できていますが、日本語版では「容赦」の漢字がうまく表示されませんでした。 #MiniMaxH3 MiniMax Design (H3)

頼む！ 悪いこと言わないので、ゲーム開発者はRemotonのskillを入れましょう！ ゲームのプロモ動画が一瞬で作れるようになります。 この2つの動画は過去に私がRemotionで作成したゲームの紹介動画。言いたいこと分かりますよ。「自分で編集したほうが凝った動画できるよ」ですよね。 違うんです。 これくらいの動画が「秒で量産」できるのがすごいんです。ショート動画でもなんでも、マーケティングのために動画を作って出すべき面は山ほどあります。 TikTokに出すプロモ動画を毎回１個１個手作りしてる場合ですか？ そんな時間かけるくらいならゲームのブラッシュアップしたいですよね？ Remotionで動画を作れるようになっておくことで、「工業的に自動化した動画制作体制」が手に入ります。それがめっちゃやりやすくなったのが今回のRemotionの公式Skill。... ということで今すぐ入れましょう・・・！ $ npx skills add remotion-dev/skills これだけ！！show more

💡 動画生成AIは余白で動きを決める 🎥 左右の動画を見比べてみましょう。 右のこぢんまりとした動きに対して、左のキャラは身体全体を使った動きをしてます。 実はこの二つの動画「同一プロンプト・同一素材」で生成してます。 なら違いは何か？左の素材画像に対して余白を追加しているのです。 余白の分だけ、キャラクターの動く余地が生まれます。同じプロンプトなのに、より大きい動きが可能になります。逆に動きが大きい場合は、対象キャラクターをフレームギリギリまで近づけることで動きを抑制できます。 もちろんプロンプトでも動きを調整できます。しかし、動きのポテンシャルは余白の有無で決まっているように感じるのです。... 以下は優先度の仮説です 1. 動かすだけの余白があるか（フレームとキャラクターの比率=提供画像） 2. その中でどれだけ動かすか（プロンプト） 個人的にはかなり本質的な発見です。 最終的なショットと生成に相応しいショットが異なることを示すからです。このギャップを認識していないと、動画生成AIから十分な性能を引き出せないことになります。 あくまでも生成用にショットサイズを調整して出力、その結果を後でトリミング＆アップスケールで編集に回す、という工夫が必要かもしれません。 生成AIは実写やアニメと異なり、アクター/モデルとフレームの関係が逆転しています。フレームが先で、その中で初めて演技もキャラクターも生成されるのです。この違いを認識することが重要なのではないかと思いました。show more

「ほしみこーーー！！」って自分で叫んでて、頭がちょっと残念な人みたいになってるのが、可愛くて逆に気に入ってます #TopviewAI #Seedance2 [PR] ---------------------------------------- Topview(TOPVIEW（トップビュー）日本公式)のサービスを通じて、噂の Seedance 2.0 を使用してみました✨😳... 今まで様々な動画生成AIを使用してきましたが、これはやはり一線を画すものではありますね。 よく動くのに線が綺麗で、プロンプトの理解力も高い。 しかも、他のサービスで試したときは、イラストやプロンプトが弾かれていたのに、とても通りが良いです。 褒めてばかりなのはフェアじゃないので、欠点も書くと、日本語の音声が少し微妙ということでしょうか。 しかし全くできないわけではなく、ところどころおかしくなるって感じです。 --- seedance2.0 のコストはやはり安くはないですが 全体的に安定していてガチャ率が低いので、結果的には安く済むことも多そうです🤔 75ドルのビジネスプランで250クレジット支給されます。 720pの15秒生成で消費クレジットは15です。 月に16回くらい生成できて一回4.5ドルくらい。 480pならコスト半分なので2.25ドルです。 480pでFastならもう少し安い1.8ドルです。 年払いなら47％オフでビジネスプランを購入できて、クレジット消費なしで無制限に生成できますが、待ち時間が長いこともあるのでご利用は計画的に😉 今回は宣伝ではあるのですが、書いたことは本音であり、やはり普通にオススメです。show more

＿＿＿＿＿＿＿＿＿＿＿＿＿＿ 『 #果てしなきスカーレット 』 プロダクションノート ＜動画編＞ ＿＿＿＿＿＿＿＿＿＿＿＿＿＿ 宴シーンのスカーレットの花ドレスは、当初CGとのハイブリッド作画のプランもあったのですが、全て作画で描くことに。 花は原画でも大変ですが、動画さんの頑張りの賜物。似たような花が並んでいるなかで、違う花に中割しないように、形が崩れないように、追いかけていく必要があります。 実線が黒色ではなく赤・青・緑などのカラフルな箇所は、塗りの時に黒い線にしないようにするためのもので、動画の段階で色ペンで描かれます。撮影上がりと見比べてみてください！

MiniMax H3 のお話 引用ポストを参考にさせていただき 「Larry Turbo + H3 Sage」を基本に... ちゃっぴーと相談して高速化してみました 1MPで10秒のI2V動画で RTX 4070 で11分12秒で生成 高速化前の約1/3になりました😆 アップスケールとフレーム補間もしてます 出だしの顔の映りが小さいときに 少しガビガビしますが概ね良好です あと音声がイマイチです 今はいろんな方が高速化に挑んで 日々更新されているので 昨日の方法が今日はもう古い みたいな世界です😅 画像素材はChatGPT-Images 2.0で生成（２枚目）show more

メイキング的なやつです。 今回は、基本的なアニメーションの作り方である 『pose to pose』をAIでやったらどうなるか？ という試みでした🥹 結論から先に言うと 「まぁまぁ大変だし、AI時代のスピード感にはそぐわないだろうな」です。 ある程度、予想もしてましたが🤣... 今回は、コンテ、ラフ原を描いて(あるいは3Dで)、絵や動きを「ある程度」コントロールしたい人向けのフローなのかなと思います。 そういった方で、AIにまだ馴染みが無い方向けに、今度、もう少し詳細な、記事かnote書こうと思います。 ---------------------------------------------- ※pose to poseというは、 動きのキーとなるポーズ、主に動きの変化点などの絵を複数枚、先に用意して、後から、間の絵をうめていってアニメーションにする手法です。 キーとなるポーズや絵を、「キーフレーム」とか「原画」。間を埋めていく絵や作業などを「中割り」「動画」と言います。 ---------------------------------------------- 以下は、AI界隈の方向け、メイキングの簡易的な説明です。 端的にいうと、 先にラフ絵で動きのプランをつくり、 その絵を使って、キーフレームの絵を生成して、 あとはひたすらスタートエンドで生成。 です🥹 --------------- ①コンテ撮をつくる いわゆるアニメの原画よりは枚数少ないですが、 ラフな絵で、動きのキーとなる一連の絵を用意して、先に動きの流れをつくります。 --------------- ②キーフレームの作成 コンテ絵と、事前につくったキャラ絵をリファレンスにして、NanoBananaPro等で、各キーフレームの絵を生成＆加工します。 私の拙いラフ絵なので、結構ガチャりましたが、もう少し丁寧に描いた、アニメーターさんのラフ原とかだと、もう少し絵のコントロールが、できるんじゃないかなと思います。 タッチ線を入れたり、変身後の衣装に変えたりなどは、さらに２段階、３段階の生成が必要でした。 --------------- ③中割りの作成 キーフレームを順番に並べて、それぞれの間を、スタートエンドで、動画生成します。 今回使用したのは、 DomoAI official / Kling AI / MiniMax Design (H3) の３つです。 主力はDomoAIで、3秒尺の生成ができるのと、割と単純な中割りになるのが良かったです。 逆に単純に割ってほしくない場合(例えば回転していて別のアングルが途中で入るとか)は、KlingやHailuoを使いました。 --------------- ④フレームの選定(コマ抜き) 生成された各動画をつないで、元々つくっていたコンテ撮のタイミングに合わせて、大胆に絵を抜いてきます。 極端なものだと、3秒(約72枚)生成して、その間の１枚しか使わない。みたいな感じですｗ あとはいわゆるタメツメの調整など --------------- ⑤撮影＆編集 別途用意した、イメージ流背のBGやエフェクト素材などと合わせてコンポジット。処理かけて、SEとBGM入れて完成です。 --------------- つまり、①と④の工程で、思いっきり、アニメーター的技能を使うことで、動きのキモはAIではなく、自分でやるということですね。 ◆メリットとしては - 動きや演技をあるていど自分でコントロールできる - ある程度積み上げながらの作業なので、部分的な修正が可能 - 溶けにくい など ◆一方デメリットは - 他のAIの手法に比べて、相当時間がかかる - クレジット消費も激しい - 色やキャラが、１カット内で安定しない （髪の毛の本数がかわったりなど、カットまたぐ分にはきにならないものでも、動きの途中で変わっちゃうので、結構目立つ） - 実景の空間でのカメラワークとかが混ざると、多分さらに難易度が上がる - コントロールに結局限界が(まだ)ある などなど、、、、 時間と手間がかかるけど、商業レベルの「品質」まで対応できるわけではない。しかも手描きアニメーターの上手い人なら、下手したら同じくらいの時間でできちゃうかもしれない。。。 ゆえに冒頭の結論に至るわけです🤣 -----------------------------------------show more

(※ChatGPT + 動画生成AI + 画像生成AI + AE) 【ご報告】 勇気を出して、憧れのとある制作チームに志願してみたところ、なんと快く受け入れてもらえました。... 今までマネタイズもせず、ただただAI動画の認知度を上げるためだけに投稿してきましたが、ようやく自分の活動ができそうです。 オンラインで面談をして頂き、まずはお試しで仕事をさせてもらう形になれたと思うので結果を出して正式に採用されたら報告ができるかもです。 一部の人は目にすることになるかもしれない期待のプロジェクトにさっそく参加させてもらえるようです。 練習を兼ねたいので、Xでの制作内容や投稿内容が少し変わるかもしれませんが、引き続きツール紹介などはかかさず投稿するつもりです。 フルコミットしだしたらXの投稿が遅れることもあるかもしれないですが、既に多くの方が同じようにツール紹介をしてくれているので引用やリポストも多様します。 これからも別の角度からAI動画を盛り上げる役割を果たすつもりですので、引き続き宜しくお願いします。 ※ ちなみにこの動画は、ChatGPT 4oでタイトルを作って、Runway Gen3で動かして、Midjourney V7で作ったイラスト合成して、AfterEffectsで編集した動画です。 こういう動画を含め、ソシャゲ系とかキャラ動作、フラットアニメ風とかも増えると思います。 今までは仕事が別だったのでＳＮＳは５０％くらいでしかやってませんでしたが、仕事の練習になるなら全力でできる機会も増えるので、おそらく投稿作品のクオリティーはあがります。 AI動画界隈の人達みんなの活動がいずれ、クリエイターとして仕事になるようにサポートできればいいなと思っていますので、これからは指標になれるような存在を目指します！ 応援してくれた方々に良い報告ができるよう頑張るぞ！ いつも見てくれてありがとう！！！🙏🙏🙏show more

先日Seedance2.0で作った動画をMinimax H3でも作ってみました！序盤のあたり、ちょっと違和感ありますね。物が壊れる音がしないので、なぜ驚いているのか分からなかったり。でも、母親と子供の声はこっちの方が好きかも #capcutcpp CapCut.Japan CapCut AI使用

Image2『キャラクター設定一発生成！』 ストーリーアニメをつくるとき 一貫した基準を作る必要があります。 それがキャラクターシートですが、 使い道で違うシートが必要になったりします。 たとえば、 全身を写すときに三面図はベターですが、 目のアップなどは顔メインのシートのほうがいいとか👀 とはいえ、いちいち作るのも、、、... という方向けのノウハウです！ Image2ではこのように同時生成の画像でしたら テキストのみでも一貫性を保ってくれます。 複数回にわたる生成ですと、たまにとても細かいところの一貫性が保たれず、 その修正で時間をとられてしまうこともありますが、 同時生成ですとその時間も節約できます！ 試してみるのはいかがでしょうか✨show more

MiniMax H3、3060の8GBで動きました‼️ 動画生成でいちばん困るのって、プロンプトを詰めたいのにコストが気になるところだと思っていて。演出をあれこれ試したいのに、納得いくまでやれないんですよね。 それがローカルで回せるようになったので、試し撃ちが電気代だけになりました。 turbo LoRAを使えば10秒が10分ちょっと。480pなので画質は落ちますけど、カット割りとか演出の確認にはこれで十分でした。 なので今後はこんな使い方ができそうです。 ローカル →... プロンプトと演出を納得行くまで詰める（無料） RunPod → 決まったものを1344×768で本番（1本8円）＋アップスケール 借りるGPUの時間も最小で済むように。 ちなみに昨夜マージされたKijaiさんのVAEのPRを当てたら、8GBで15秒も通りました。show more