正在加载视频...

视频加载失败

加载此视频时出现问题。这可能是由于临时网络问题，或视频可能不可用。

リアルタイムでの画像生成でVTuberの未来を試す。VRoidで作った簡易3Dモデルを使ってwebカメでモーキャプしながらさらに同時にリアルタイムで画像生成。未来の配信は画像生成ベースが主流になる気はする。衣装を配信中に頻繁に変えたり3Dでは難しいことが簡単にできるはず

Hirokazu Yokohara

123,772 subscribers

1,208,382 次观看 • 2 年前 •via X (Twitter)

科学技术艺术

Anya Rossi• Live Now

Private livecam show

10 条评论

Vestビィ的头像

Vestビィ2 年前

でも一瞬だけネコミミ生えたりするの面白い

雪兎=凛・如月(ゆきと) 的头像

雪兎=凛・如月(ゆきと)2 年前

画像生成の精度が安定すること、生成速度が上がること、が要件クリアできるかどうかが勝負になりそうですね

CornHeads 的头像

CornHeads2 年前

■生成AI問題知らない人へ・ほぼ全てのAI絵は58億枚の剽窃で成立・Adobe等AIも第三者が二次創作を学習させクリーンではない・人と違い瞬時に模倣しその技術を他者に渡せる・生成物を作品として享受できるのは違法では？権利と責任が不明瞭・海外では規制が進むが日本だけ検討止りでベルヌ条約違反

ボードゲームをするラッコ的头像

ボードゲームをするラッコ2 年前

凄すぎて早くちょっと先の未来行きたいよドラえもん！

まるやま的头像

まるやま2 年前

普通に3Dアバターを生成すればいいのでは…？

TR 的头像

TR2 年前

ゆくゆくは現実の世界でリアルタイムでアニメが作れるそれも自分達で。凄くない？ワクワクし過ぎて妄想膨らむ😆 ホント面白いなぁ。そしてエンジニアの人達の凄さよ！感謝

希Hei 的头像

希Hei2 年前

すごいけど、ラグとスペックがきつそうですね

eiji1011 的头像

eiji10112 年前

なるほど。おもしろいですね！あまり詳しくないんですが、画像生成の際にはただの画像ではなく、最低限の骨格の位置情報を入力しなければいけないのですか？画像単体でできるものかと思ってました。

村長的头像

村長2 年前

着替えの際に衣装の情報を間違えたら、リアルタイムでおセンシティブなコスチュームになってしまうかも

Alex_tu 的头像

Alex_tu2 年前

H100にLCM Loraを加えて20fpsは簡単だろう

相关视频

リアルタイム動画生成型のAI VTuberの配信、めっちゃ面白い！ AIだからこそできる配信。今までのAI VTuberはリスナーのコメントに反応して返答をするだけだったが、ついにコメントに応じてリアルタイムで動き回るようになった。特にキャラクターが動くだけじゃなくて、衣装や周りの空間もコロコロ変化するのが面白い。（突然コーヒーがでてきたり、ウニがでてきたり） 2Dや3Dモデルじゃここまではできない、画面全体をリアルタイムで生成されていくからこそできる無限の表現の広がりを感じたし、 AIとリスナーで一緒に配信を作ってる感があるな。

リアルタイム動画生成型のAI VTuberの配信、めっちゃ面白い！ AIだからこそできる配信。今までのAI VTuberはリスナーのコメントに反応して返答をするだけだったが、ついにコメントに応じてリアルタイムで動き回るようになった。特にキャラクターが動くだけじゃなくて、衣装や周りの空間もコロコロ変化するのが面白い。（突然コーヒーがでてきたり、ウニがでてきたり） 2Dや3Dモデルじゃここまではできない、画面全体をリアルタイムで生成されていくからこそできる無限の表現の広がりを感じたし、 AIとリスナーで一緒に配信を作ってる感があるな。

武地実 @Gatebox デジタルフィギュア開発中

94,724 次观看 • 18 天前

SeedanceやKlingなどの動画生成で、狙ったカメラワークにならない時は、一度3Dモデルを作って、自分でカメラワークを組むのもかなり有効です。 3D未経験でも、Tripoなどを使えば画像から3Dモデルを生成できます。流れはシンプルで、参照画像 → Tripoで3Dモデル生成 → Blender等でカメラワーク作成 → Kling 3.0 Omniで参照画像の質感を適用「カメラワークが思い通りにならない」という時の選択肢として、ぜひ試してみてください。

SeedanceやKlingなどの動画生成で、狙ったカメラワークにならない時は、一度3Dモデルを作って、自分でカメラワークを組むのもかなり有効です。 3D未経験でも、Tripoなどを使えば画像から3Dモデルを生成できます。流れはシンプルで、参照画像 → Tripoで3Dモデル生成 → Blender等でカメラワーク作成 → Kling 3.0 Omniで参照画像の質感を適用「カメラワークが思い通りにならない」という時の選択肢として、ぜひ試してみてください。

はさまるスタジオ (Hasamaru Studio)

29,735 次观看 • 5 个月前

画像生成がまた高速になってるみたいだから試しにVRoidの画面をリアルタイムで画像生成。LCM。一年ちょっとでこんなに速く生成されるようになっていくとは。ちょっと時が経つだけで技術が進んで浦島状態になる

画像生成がまた高速になってるみたいだから試しにVRoidの画面をリアルタイムで画像生成。LCM。一年ちょっとでこんなに速く生成されるようになっていくとは。ちょっと時が経つだけで技術が進んで浦島状態になる

Hirokazu Yokohara

497,542 次观看 • 2 年前

今回は同じイラスト画像1枚から、Meshy 7とGPT-6 Astra（高）で3Dモデルを作って比較してみました。 Astraも全身の形や衣装の特徴を再現していますが、今回の比較では、Meshyのほうが顔や髪、衣装の細かな装飾まで作り込まれた仕上がりになりました。制作時間は、Meshyはモデルとテクスチャを合わせて3分程だったのに対して、Astraは約8分でした。 Meshyはプロンプトを入力せず、画像を用意して数回クリックするだけで元画像に近いモデルを生成できるので誰でも簡単に使えます。無料登録で試しに使う事も出来ます。以前Meshyを使った記事はこちら

今回は同じイラスト画像1枚から、Meshy 7とGPT-6 Astra（高）で3Dモデルを作って比較してみました。 Astraも全身の形や衣装の特徴を再現していますが、今回の比較では、Meshyのほうが顔や髪、衣装の細かな装飾まで作り込まれた仕上がりになりました。制作時間は、Meshyはモデルとテクスチャを合わせて3分程だったのに対して、Astraは約8分でした。 Meshyはプロンプトを入力せず、画像を用意して数回クリックするだけで元画像に近いモデルを生成できるので誰でも簡単に使えます。無料登録で試しに使う事も出来ます。以前Meshyを使った記事はこちら

ModelingHappy

100,470 次观看 • 17 天前

2024年の夏から秋にかけて僕がMetaでやっていた研究の公開です！リアルタイムの動画生成モデル、StreamDiTの開発をしていました！ StreamDiTは自己回帰的な動画生成モデルで、従来のモデルとは異なり、長さ制限無しでかつリアルタイム・インタラクティブに動画を生成することが出来ます。(続く)

2024年の夏から秋にかけて僕がMetaでやっていた研究の公開です！リアルタイムの動画生成モデル、StreamDiTの開発をしていました！ StreamDiTは自己回帰的な動画生成モデルで、従来のモデルとは異なり、長さ制限無しでかつリアルタイム・インタラクティブに動画を生成することが出来ます。(続く)

あき先生(Aki)

150,164 次观看 • 1 年前

KLINGのOmniで生成しました。主体登録とi2vを併用すると、主体よりもi2v側の画像に引っ張られるので、基本はi2v元の画像間で整合性を取っておく必要がありました。元の画像から女性を全て消した画像でのi2v等も試してみたのですが、Omniで生成される人物も割とブレるのと、女性の出現場所がなかなかに神出鬼没で（え？そこから出るの？の連発）、それならKLING3.0やOmniはi2v時に元画像からの崩れも少ないので、画像上で纏めた方が楽でした。主体登録のコツがあるのかもしれません。 3分間の動画で完璧に同一人物での生成ができるといいのですが、まだなかなか難易度が高いですね。いや～、画像の背景の密度を上げてもこれだけ動画生成でついてきてくれるようになるなんて、高密度画像の生成のし甲斐がいありますね～😆 今まで、高密度の画像を動画化してもi2vでほぼ潰れるので、動画ってオムネゆらすくらいしかやる気出なかったのですが、これなら自分の生成画像を動かしてみたくなりますね～。画像生成：GrokImagine+Nanobanana Pro(Hailuo AI) 動画生成：KLING3.0 & Omni #KLING3 Kling AI 動画編集：CapCut #capcut生成ai #capcutjapandiscord CapCut.Japan

KLINGのOmniで生成しました。主体登録とi2vを併用すると、主体よりもi2v側の画像に引っ張られるので、基本はi2v元の画像間で整合性を取っておく必要がありました。元の画像から女性を全て消した画像でのi2v等も試してみたのですが、Omniで生成される人物も割とブレるのと、女性の出現場所がなかなかに神出鬼没で（え？そこから出るの？の連発）、それならKLING3.0やOmniはi2v時に元画像からの崩れも少ないので、画像上で纏めた方が楽でした。主体登録のコツがあるのかもしれません。 3分間の動画で完璧に同一人物での生成ができるといいのですが、まだなかなか難易度が高いですね。いや～、画像の背景の密度を上げてもこれだけ動画生成でついてきてくれるようになるなんて、高密度画像の生成のし甲斐がいありますね～😆 今まで、高密度の画像を動画化してもi2vでほぼ潰れるので、動画ってオムネゆらすくらいしかやる気出なかったのですが、これなら自分の生成画像を動かしてみたくなりますね～。画像生成：GrokImagine+Nanobanana Pro(Hailuo AI) 動画生成：KLING3.0 & Omni #KLING3 Kling AI 動画編集：CapCut #capcut生成ai #capcutjapandiscord CapCut.Japan

AI Girl's Photo Studio

33,218 次观看 • 7 个月前

Studioの新機能「Embed Code AI」を使って、画像の無限ループを簡単に実装できました💡 カルーセルを色々触って実装する従来の方法よりも、これが一番簡単で挙動も安定しそうです🙆‍♂️ 【動画内で試した指示】 4枚の画像が横方向に無限ループするようにしてください。 ↓ 横幅100%にしてください。画像の高さはEmbedBoxの高さ100%になるように。画像は以下のものを使ってください。［4枚分の画像のURLを貼り付ける］ ↓ もっと動きをゆっくりにしてください。 ---- ※動画は再生速度を編集していますので、実際のコード生成は動画よりも少し時間がかかります。

Studioの新機能「Embed Code AI」を使って、画像の無限ループを簡単に実装できました💡 カルーセルを色々触って実装する従来の方法よりも、これが一番簡単で挙動も安定しそうです🙆‍♂️ 【動画内で試した指示】 4枚の画像が横方向に無限ループするようにしてください。 ↓ 横幅100%にしてください。画像の高さはEmbedBoxの高さ100%になるように。画像は以下のものを使ってください。［4枚分の画像のURLを貼り付ける］ ↓ もっと動きをゆっくりにしてください。 ---- ※動画は再生速度を編集していますので、実際のコード生成は動画よりも少し時間がかかります。

中島健太郎／Studio Ambassador／LEARNED Inc.

21,631 次观看 • 8 个月前

Tripo MCPがでましたね。BlenderとCursorに連携させることでCursorからBlenderに3Dモデルの生成をリクエストすることが出来ます。生成に時間がかかるので複雑なことは難しいですが。これからに期待ですね。

Tripo MCPがでましたね。BlenderとCursorに連携させることでCursorからBlenderに3Dモデルの生成をリクエストすることが出来ます。生成に時間がかかるので複雑なことは難しいですが。これからに期待ですね。

やのせん@AI/VR/メタバース教育

37,018 次观看 • 1 年前

GrokのImage 2.0っていう新しい画像生成モデルと新ツールが出たらしい Grokアプリから開くとこんな感じで、生成した画像をレイヤー分けして右のツリーでレイヤー単位で指定することができて、それぞれにプロンプト指示で再生成できる編集で生成される画像は若干アス比変わってるからGPT Image 2的な感じで結局全体が再生成されてはいる、でも生成速度は爆速でいい感じあとどれくらい文字つぶれずに生成できるか試してみたけど、ここはGPT Image 2のがつぶれずに生成できてたかなー

GrokのImage 2.0っていう新しい画像生成モデルと新ツールが出たらしい Grokアプリから開くとこんな感じで、生成した画像をレイヤー分けして右のツリーでレイヤー単位で指定することができて、それぞれにプロンプト指示で再生成できる編集で生成される画像は若干アス比変わってるからGPT Image 2的な感じで結局全体が再生成されてはいる、でも生成速度は爆速でいい感じあとどれくらい文字つぶれずに生成できるか試してみたけど、ここはGPT Image 2のがつぶれずに生成できてたかなー

松丸彗吾(keigo matsumaru)

35,009 次观看 • 1 个月前

GPT-6 Astra自体に画像生成をさせるのと FireFly上のGPT Image 2.5に画像生成させるのとどちらがクオリティ上なのか確認してみました GPT-6 Astra自体に画像生成をさせた側はミスったからといって勝手に修正を入れた上でこのクオリティでしたまあ明日には挙動が変わってるとかありそうですが

GPT-6 Astra自体に画像生成をさせるのと FireFly上のGPT Image 2.5に画像生成させるのとどちらがクオリティ上なのか確認してみました GPT-6 Astra自体に画像生成をさせた側はミスったからといって勝手に修正を入れた上でこのクオリティでしたまあ明日には挙動が変わってるとかありそうですが

ShadeLurk

27,891 次观看 • 17 天前

ChatGPTの新しい画像生成、すっご… 画像をアップロードしたら、その人物を維持したまま、別のポーズの画像を生成できてしまう。・別のポーズにする・コーヒーを持たせる・走っている全身の絵にする・女性を登場させる・大勢の前でプレゼンさせるなんでも改変可能。プレゼンに使えるビジネス素材が作り放題なのでは？「いらすとや」みたいな一貫性のある素材画像が、無限に作れてしまう。 Gemini 2.0より再現性が高かった。夜中に使い始めたものの、一斉に需要が高まったのか、いまは一時的に利用できなくなってしまった。

ChatGPTの新しい画像生成、すっご… 画像をアップロードしたら、その人物を維持したまま、別のポーズの画像を生成できてしまう。・別のポーズにする・コーヒーを持たせる・走っている全身の絵にする・女性を登場させる・大勢の前でプレゼンさせるなんでも改変可能。プレゼンに使えるビジネス素材が作り放題なのでは？「いらすとや」みたいな一貫性のある素材画像が、無限に作れてしまう。 Gemini 2.0より再現性が高かった。夜中に使い始めたものの、一斉に需要が高まったのか、いまは一時的に利用できなくなってしまった。

エクセル兄さん(たてばやし淳)@8万部「生成AI最速仕事術」

774,576 次观看 • 1 年前

$＼＼ \ / ／／ YouTube収益化達成ショート動画毎日投稿100日／／ / \ ＼＼この時に書いていた『初心者が最初から高品質な動画を作るのは難しいため編集はできるだけシンプルにしました最初の1か月はスマホ、現在はiPadで編集しています将来的には高度なソフトも使いたいですが今は配信後にiPadで手軽に編集しています』に対して『どうやって編集してるの？』など質問をいただいたので簡単に動画にしました Twitchで配信してる方ならスマホのみでショートが作成できます Youtube配信の方でも動画素材さえあればスマホやiPadで編集可能です先を見るとAdobeの編集ソフトなど使った方が色んなことができると思うのであくまでショートを簡単に作りたい人向けかなと思います$

＼＼ \ / ／／ YouTube収益化達成ショート動画毎日投稿100日／／ / \ ＼＼この時に書いていた『初心者が最初から高品質な動画を作るのは難しいため編集はできるだけシンプルにしました最初の1か月はスマホ、現在はiPadで編集しています将来的には高度なソフトも使いたいですが今は配信後にiPadで手軽に編集しています』に対して『どうやって編集してるの？』など質問をいただいたので簡単に動画にしました Twitchで配信してる方ならスマホのみでショートが作成できます Youtube配信の方でも動画素材さえあればスマホやiPadで編集可能です先を見るとAdobeの編集ソフトなど使った方が色んなことができると思うのであくまでショートを簡単に作りたい人向けかなと思います

限界お姉さんほーちゃん

20,115 次观看 • 5 个月前

うわこれすごい。ラフな手書きイラストを元に3Dモデルを生成できるモデル。数年後には、いま画像生成AIで誰もがハイクオリティな画像を作れるように誰もが3Dモデルを作れるようになりそう。

うわこれすごい。ラフな手書きイラストを元に3Dモデルを生成できるモデル。数年後には、いま画像生成AIで誰もがハイクオリティな画像を作れるように誰もが3Dモデルを作れるようになりそう。

梶谷健人

985,579 次观看 • 3 年前

プロンプトのみで生成。クオリティは大したことないけど1年前から考えるとプロンプトのみで時間軸の動きを指定出来てこんなに簡単にアニメっぽいものが生成できるのは進歩が速い。AnimateDiff prompt travel簡単に試せるやつを使った

プロンプトのみで生成。クオリティは大したことないけど1年前から考えるとプロンプトのみで時間軸の動きを指定出来てこんなに簡単にアニメっぽいものが生成できるのは進歩が速い。AnimateDiff prompt travel簡単に試せるやつを使った

Hirokazu Yokohara

1,999,202 次观看 • 3 年前

【KOLORS1.5】imageFXより日本人が得意!? Kling AIより年末に発表された画像生成モデルKOLORS1.5の日本人生成能力が高いです！使用して見た感じでは今のところimageFXのような厳しい検問は無いように感じました。子供も生成できるので、家族のシーンやオムツのCMなど多岐に渡る用途が考えられます。この動画は全てKOLORS1.5で生成した画像をKling1.6で動画にしていますが、他にもリップシンク機能があったりと、同じツールで全て完結できるのは有難いですね。ちなみに画像１枚で１クレジット消費します。まだまだ検証できていないのでぜひみなさんでお試しください。まだKlingを試したことない方は(Kling AI)プロフィールにあるURLからどうぞ。 #KlingAIupdate #画像生成 #KOLORS #動画生成 #KlingAI

【KOLORS1.5】imageFXより日本人が得意!? Kling AIより年末に発表された画像生成モデルKOLORS1.5の日本人生成能力が高いです！使用して見た感じでは今のところimageFXのような厳しい検問は無いように感じました。子供も生成できるので、家族のシーンやオムツのCMなど多岐に渡る用途が考えられます。この動画は全てKOLORS1.5で生成した画像をKling1.6で動画にしていますが、他にもリップシンク機能があったりと、同じツールで全て完結できるのは有難いですね。ちなみに画像１枚で１クレジット消費します。まだまだ検証できていないのでぜひみなさんでお試しください。まだKlingを試したことない方は(Kling AI)プロフィールにあるURLからどうぞ。 #KlingAIupdate #画像生成 #KOLORS #動画生成 #KlingAI

SEIIIRU😈動画生成AIを使う映像クリエイター

37,627 次观看 • 1 年前

① Claudeでパワポを作る（skillで固定） ② 「ChatGPT in PowerPoint」で画像を連続生成 ↓ 放置しているだけで、全スライドが画像入りで完成＿＿＿ PowerPointを作るフローが完全に変わったと感じています。現在は2つのステップを組み合わせることで、きれいな画像入りのスライドが安定して完成するようになりました。 🎨 第1段階はClaudeでPowerPointを作成まず最初のステップとして、ClaudeにPowerPointを作成させます。この段階では自分の型やテンプレートをSkillでガチガチに再現させるように指定するため、好みのデザインで出力が可能です。 ※Claudeは画像生成ができないため、画像が欲しい部分にはあえて枠線だけの「プレースホルダー」と、希望するキャプションのみを記載してもらいます。 🤖 第2段階はChatGPT in PowerPointで画像生成次に、出来上がったファイルをPowerPointソフトで開き、サイドバーの「ChatGPT in PowerPoint」に指示を出します。プレースホルダーとキャプションがある部分を認識させ、そのサイズに合う画像を生成して置き換えるよう命令します。スライド全体に対して同様の処理を行うよう指示して、あとはそのまま放置します。 ✨ 全自動の画像挿入でスライドが完成放置している間に、ChatGPT in PowerPointが全スライドのプレースホルダーを洗い出します。キャプションに合う画像を自動で順番に生成し、プレースホルダーと置き換えて挿入してくれます。スライドの雰囲気に合致した画像入りの資料が手軽に完成するため、非常に使いやすく安定したワークフローです。

① Claudeでパワポを作る（skillで固定） ② 「ChatGPT in PowerPoint」で画像を連続生成 ↓ 放置しているだけで、全スライドが画像入りで完成＿＿＿ PowerPointを作るフローが完全に変わったと感じています。現在は2つのステップを組み合わせることで、きれいな画像入りのスライドが安定して完成するようになりました。 🎨 第1段階はClaudeでPowerPointを作成まず最初のステップとして、ClaudeにPowerPointを作成させます。この段階では自分の型やテンプレートをSkillでガチガチに再現させるように指定するため、好みのデザインで出力が可能です。 ※Claudeは画像生成ができないため、画像が欲しい部分にはあえて枠線だけの「プレースホルダー」と、希望するキャプションのみを記載してもらいます。 🤖 第2段階はChatGPT in PowerPointで画像生成次に、出来上がったファイルをPowerPointソフトで開き、サイドバーの「ChatGPT in PowerPoint」に指示を出します。プレースホルダーとキャプションがある部分を認識させ、そのサイズに合う画像を生成して置き換えるよう命令します。スライド全体に対して同様の処理を行うよう指示して、あとはそのまま放置します。 ✨ 全自動の画像挿入でスライドが完成放置している間に、ChatGPT in PowerPointが全スライドのプレースホルダーを洗い出します。キャプションに合う画像を自動で順番に生成し、プレースホルダーと置き換えて挿入してくれます。スライドの雰囲気に合致した画像入りの資料が手軽に完成するため、非常に使いやすく安定したワークフローです。

エクセル兄さん(たてばやし淳)@9万部「生成AI最速仕事術」

89,029 次观看 • 3 个月前

AIが動画から3Dアニメーションを生成知識がなくても誰でも簡単にアニメーションを生成できるこの技術はやばすぎる…

AIが動画から3Dアニメーションを生成知識がなくても誰でも簡単にアニメーションを生成できるこの技術はやばすぎる…

あるる ChatGPT × AIツール

556,768 次观看 • 3 年前

「授業で使える」とバズっている動画生成が思った以上に簡単だった！ ①何か生徒がイメージしたものを投げる ②「動画解説」を押して ③「生成」を押して待つだけ何がすごいって... ・「まぁ」とか感情表現を入れてAIが話す・スライドがかわいい・初心者でも簡単バズった動画内では、作り方の解説がなかったので全過程を動画にしてみました。「NotebookLM」で検索して、これをみながら試すと、おそらく誰でも動画生成できちゃいます！

「授業で使える」とバズっている動画生成が思った以上に簡単だった！ ①何か生徒がイメージしたものを投げる ②「動画解説」を押して ③「生成」を押して待つだけ何がすごいって... ・「まぁ」とか感情表現を入れてAIが話す・スライドがかわいい・初心者でも簡単バズった動画内では、作り方の解説がなかったので全過程を動画にしてみました。「NotebookLM」で検索して、これをみながら試すと、おそらく誰でも動画生成できちゃいます！

ゆとりんり a.k.a.歩く倫理観

67,342 次观看 • 7 个月前