Blender × Astra 3Dキャラ制作パイプライン、本格構築へ。 これまでの検証で、AIに任せられるところと、素材を用意した方がよいところが見えてきました。 まず作るのは、表情や動きまで設定したチビキャラの「素体」。 この素体を基準に、髪・衣装・装飾をTripoで生成。Astraが調整し、オリジナルキャラへ仕上げる流れを検証します。 目指すのは、Blender未経験者でも、自分のAstraと相談しながら3Dキャラを完成させられるパイプライン。 権利面も整理した配布用素体を新たに準備していきます。

専門知識0でも、AIと“いい感じ”の3D制作へ。 Blender × Astra × Tripo 3Dキャラ制作パイプライン育成中。 今日は顔以外をTripoで3D生成。 Smart... UVでテクスチャ空間の使用率が34.9%→79.3%になりました✨ その後、Tripo Studioでテクスチャを生成。 一部にUVの重なりや模様の崩れが残ったため、AstraがBlender上で検査・修正し、リボンや靴へテクスチャを転写。 教材では、この辺りの専門作業を購入者が覚えるのではなく、Astraが実行・検査する設計にします。 人が担当するのは、作りたい姿を伝え、結果に「OK／修正」を返すこと。 そんな3D制作を目指します。show more

3D生成AIガチるとここまでできるよという動画【PR：Tripo】 ※動画生成じゃないです オリキャラのモデリングからショート向けのダンス動画作れるまで２日ぐらい！ 昨日の晩にTripoのアプデきてたの気づいて、そこから作り始めてさっき完成 Tripoのスマートメッシュが最強すぎてマジなんでもできる！ GPT-6 Astraに色々手伝ってもらったりすると時短できてGOOD 今回は揺れモノのセットアップと１影のみ落とすシェーダーの作成を丸投げ 一番詰まるのがリギングだと思うんですが、オススメは... 頭と体のみBlenderで合体 ↓ 再度TripoにアップロードしてリグからVRM 1.0でリギング ↓ Tripoのウェイトフル無視でウェイト済みの素体からウェイト転送 ↓ 揺れモノをAstraが担当 ウェイト済みの素体は手で塗ったやつなのでここは参考にならないかも。 素体のモデル自体はTripoで出してます（過去ポス参照） 流石に人体側のリギングはAstra単体だと厳しいので丸投げは非推奨 聞きたいことがあればリプで質問ください！show more

(※ChatGPT + 動画生成AI + 画像生成AI + AE) 【ご報告】 勇気を出して、憧れのとある制作チームに志願してみたところ、なんと快く受け入れてもらえました。... 今までマネタイズもせず、ただただAI動画の認知度を上げるためだけに投稿してきましたが、ようやく自分の活動ができそうです。 オンラインで面談をして頂き、まずはお試しで仕事をさせてもらう形になれたと思うので結果を出して正式に採用されたら報告ができるかもです。 一部の人は目にすることになるかもしれない期待のプロジェクトにさっそく参加させてもらえるようです。 練習を兼ねたいので、Xでの制作内容や投稿内容が少し変わるかもしれませんが、引き続きツール紹介などはかかさず投稿するつもりです。 フルコミットしだしたらXの投稿が遅れることもあるかもしれないですが、既に多くの方が同じようにツール紹介をしてくれているので引用やリポストも多様します。 これからも別の角度からAI動画を盛り上げる役割を果たすつもりですので、引き続き宜しくお願いします。 ※ ちなみにこの動画は、ChatGPT 4oでタイトルを作って、Runway Gen3で動かして、Midjourney V7で作ったイラスト合成して、AfterEffectsで編集した動画です。 こういう動画を含め、ソシャゲ系とかキャラ動作、フラットアニメ風とかも増えると思います。 今までは仕事が別だったのでＳＮＳは５０％くらいでしかやってませんでしたが、仕事の練習になるなら全力でできる機会も増えるので、おそらく投稿作品のクオリティーはあがります。 AI動画界隈の人達みんなの活動がいずれ、クリエイターとして仕事になるようにサポートできればいいなと思っていますので、これからは指標になれるような存在を目指します！ 応援してくれた方々に良い報告ができるよう頑張るぞ！ いつも見てくれてありがとう！！！🙏🙏🙏show more

NOBUさんのGemini Omniを使った手法が気になって仕方なかったので、ギター演奏でどのくらいの精度が出せるか試してみました🎸 これはいい、失敗をかなり減らせると思います！ 手順は引用元とほぼ同じです 1.演奏シーン撮影 2.Gemini Omniで運指とストロークをマネキン化 3.その動画と一緒に他素材をリファレンスさせてSeedance2.0で生成 再現度がかなり高いんじゃないでしょうか✨... ここで、実写なのにわざわざマネキン化を挟む必要があるのかという疑問があると思います。私も疑問です😅 リプ欄に今度のフェス用に、撮影素材をリファレンスさせて、直Kling3.0 Omni生成、直Seedance2.0生成した動画も載せていますが、プロンプトを改良しながらまぁまぁガチャして作りました。 一方で、マネキン化を挟んだものは一発でできました🙌まだこのケースしか試していないので、他の素材でも可能か、どのくらいカメラワークや画角変更が可能かなど、検証したい部分はたくさんありますが、かなり期待できる気がします。3D素体みたいな視認しやすいものを挟むことで、リファレンスする際にAIが動きだけに集中できるのかもしれません。 ちなみにGemini Omniで、撮影素材と他画像を参照させて直でできないか生成したものもリプ欄に載せておきます。Geminiは契約していなくて、マネキン化とこの実験で尽きてしまったので、他に試せていないですが、これは失敗しました。また実験したいと思います！show more

【blender使い方メモ】 blenderのスカルプトブラシでcloth系のもの色々ありますがどれも思ったようなしわにならず。。と思ってたのですが初めてそれっぽいしわを作れました。 ・Poseブラシ ・DeformationTrargetをClothSimulationにする ・DeformationをSquash＆Stretchにする これで筒上のオブジェクトの端をドラッグするとそれっぽいしわができました。レッグウォーマーとかこれで作れるかも？短くなったときはDeformationTrargetをGeometryにするとしわを保ったまま、元の長さに変形できるようです。 #b3d

3日間で三面図からモデリング、Astra と Blender でリギング、Webサイト組み込みで動かせるところまでいけました✌️ ざっくりとした作業の流れ 1. GPT Image で三面図... (正面/横/後ろ) を1枚ずつ作成 2. Hi3D へマルチビューで添付して生成 (200万ポリゴン) 3. FBX形式でダウンロードしてAstraへ投げる ```prompt このHi3Dで生成したミニキャラの3Dモデルを、Blenderを操作してボーンを入れて、動かせるようにしてください。Blenderを操作するときは、必ずComputer Useで操作するようにしてください。 ``` 4. Blenderを操作してボーンを入れてもらう 5. 指が破綻していた(6本になっていた)ので、スクショ添付して指だけ調整してもらう ```prompt 重大な修正必須箇所があって、手の指が6本生えてるのでblender操作して修正できる？ あと指の造形もちょっと木彫りっぽく見えて調整したいかも... ``` 6. 気になるところをスクショ添付して限界まで調整してもらう ```prompt プレビュー見ると、まだ少しテクスチャの余計な塗りや生成時のにじみなどが残ってしまっているので、Blenderを操作してUV展開してテクスチャを再生成or手修正してください。 ``` 7. Webビューアを作成、3Dモデルを組み込んでもらう ほぼ先人の方々の知恵を拝借しています。 次はモーションやまばたきなど、細かい部分のアニメーションを作り込んでみようと思います！show more

開発中の手話アバターについて。 リアルタイムでカメラで手話の動きを捉え、キャラクターで再現する機能を開発していますが、手話を第一言語とするろう者の方に見てもらったところ、 「手話として読み取れない」という率直な意見をいただきました。 一方で、骨格だけのシンプルな表示は「動きがはっきりしていて見やすい」と意見をもらいました。 手話を十分に理解していない私には「手話らしく動いている」ように見えても、手話を使う方に意味が伝わるとは限らない。 「それらしく見えること」と「言語として伝わること」は違う。その差をあらためて実感しました。 この声を受けて、10月17日の京都のイベントでは、当初予定していたキャラクターのアバターではなく、骨格表現をベースにしたもの。披露しようと考えています。 大切にしたいのは、見た目を作り込むことよりも、手話の動きや表現がきちんと伝わること。 手話を使う方と一緒に確かめながら、開発を進めていきます。

[③試作完成！] イラスト本から作れるペーパークラフトのキットが完成しました！これは実寸大で、実際に同じものを作ることができます✂️✨ 下のリプ欄に投票を用意します！ご購入を検討されている方は、ぜひ回答をお願いいたします🙌

Image2『キャラクター設定一発生成！』 ストーリーアニメをつくるとき 一貫した基準を作る必要があります。 それがキャラクターシートですが、 使い道で違うシートが必要になったりします。 たとえば、 全身を写すときに三面図はベターですが、 目のアップなどは顔メインのシートのほうがいいとか👀 とはいえ、いちいち作るのも、、、... という方向けのノウハウです！ Image2ではこのように同時生成の画像でしたら テキストのみでも一貫性を保ってくれます。 複数回にわたる生成ですと、たまにとても細かいところの一貫性が保たれず、 その修正で時間をとられてしまうこともありますが、 同時生成ですとその時間も節約できます！ 試してみるのはいかがでしょうか✨show more

Tripo P2.0 × Codexで1枚絵からキャラクターモデルを制作できる「きゃらくる/Charakuru」というキットを無料公開しました！ なんと、 Tripo様より正式にスポンサードしていただくことになりました！！！ Tripoだけでキャラクターモデルを制作しようとすると、顔がガビガビだったり、動きがおかしかったり、テクスチャが汚かったりしてしまいます…！ このキットはそれを解決します！ AIに丸投げするサービスではなく、エージェントをアシスタントとして共同でキャラクターモデリングをしていくタイプのローカルキットです！... GPT-6.1 Sol,GPT-6 AstraのComputer useを最大限生かしています！ 丸投げしてしまうとクオリティがひどく、かといって人力でやると鬼ほどスキルが要求される問題の解決を目指しています。 自分がワークフローを共有したとしても再現性が無く、敷居も高かったので、いっそのことみんなが簡単に再現できるようなキットを作ってしまおうという感じで作りました！ 僕が見つけたワークフローをローカルアプリやエージェントのSkillsに詰め込み、それをユーザーが再現できる形で配布しています。 動作にblenderを活用していますが、ユーザーが触ることはありません。 人間が行う必要のある作業は、アプリ上の簡単な操作で実現できるようにしています。 無料なのでぜひお試しください～！ ※現在開発途中で足らない機能も多いですが、今後のアップデートで順次機能を追加していく予定です！show more

いざアニメ制作を始めようとしましたが、当時は制作に必要な備品が何もありませんでした。そこで山本が倒産した会社に連絡し、「掃除を手伝う代わりに、備品を一部譲っていただけないでしょうか」と相談。会社の方もとても親切に協力してくださり、そのおかげで必要な備品を揃えることができました。こうして、僕たちのアニメ制作が本格的に動き出します。備品をもらったその日は夏で、帰りに駅前でアイスを食べたことを覚えています。 当初、僕は山本に「一緒に自主制作アニメを作ろう」と提案しただけで、その活動を将来どのように発展させていくかまでは考えていませんでした。一方、山本はすでにその先の展開を思い描いていて、自分なりの構想を僕に話してくれました。 当時の僕は、その構想を十分には理解できていなかったかもしれません。それでも、山本の話には何か面白いことが始まりそうな予感がありました。 そして、備品を揃えるために自ら動き、制作上の問題を一つ一つ解決していく山本の姿を見て、作画だけでなく制作全体を動かす役割が合っているのではないかと思い、そこで彼にプロデューサーの役割をお願いしました。

TripoのP2.0が来たので、以前P1.0で制作したキャラクターモデルを作り直してみた！ ※本ポストはTripo様からのPR依頼ですが、内容はいつもと変わってません。気になるところやP1.0の方が優れていたケースもあげています。 P1.0→P2.0になって、キャラクターモデリングする上で一番明確に違いを感じ取れたのは、「素体の上に衣装が重なる構造で出力された」ことです。 これがガチで神 造形やトポロジーはもちろん綺麗になりましたが、それよりも、Blenderに読み込んだ後、普通のキャラクターモデルに近い感覚で扱えるようになったことが今回の進化の本質だと感じました。 従来のAIだと素体と衣装がつながって出てくるので、ウェイトを手作業でちまちま塗る必要がありました。 レイヤー分けされていないイラストに加筆している感じですね。ちょっと無理やり。 Blenderの標準機能である自動ウェイトも対応しきれないので、めちゃくちゃめんどくさかったです。 P2.0で衣装まるまる1発で生成してみたらなんかめちゃくちゃ綺麗な素体の上に衣装を着ている形で出てきたので、「これウェイト転送できるんじゃね？」と思ってやってみたらできました。... 素体から衣装へウェイト転送ができるできないでめんどくささ10倍くらい違います！ ウェイトペイントにかかる時間が9割ぐらい減ったので控えめに言って神です！！ P2.0すごい。 細かなパーツの揺れものセットアップの時にちょろっと塗ったぐらいですね。 明確に敷居も下がってると思います！ 今回は髪の毛を揺らしたかったので、髪の毛・頭部・体（衣装）の３パーツに分割してTripoで生成しました。 この辺はTripoを使ったキャラクターモデリングの記事で後日解説します！ 色々試したところ、髪の毛だけはP1.0の方が造形もトポロジーもよかったので、そっちを採用してます！ プレビュー提供で三面図モードが使えないので、多分それかな〜 「綺麗なトポロジーを優先しすぎて造形が荒くなる」とかもあるのかな…？と予測もしてみたり。 それから、頭部の綺麗さがめちゃくちゃすごいです。 トポロジーがもう人が作ったんかってぐらい。（それでもまだ差はあるけど…） 目は依然として手直しがいりますね。構造が複雑なので仕方ない。 でもう一つびっくりしたのが口の構造！ 上唇と下唇がちゃんと分離して出力されて、口内の処理も一般的な3Dモデルとほぼ同じ処理でめちゃくちゃ表情つけやすかったです。 （P1.0では分割されておらず、表情を作りづらかった） ただ今回も8割が人力です。 このモデルのように、スカートやストラップなど揺れものが多いモデルを作ろうと思うと、スキニングとかに慣れている人でないと厳しいですね Tripoでの作業が20分ぐらいで、あと全部普通にBlenderで調整したりセットアップしたりしてました。 それから、P2.0のアップデートには関係ないっちゃないんですが、UVは依然としてメチャクチャなままです。 簡単な編集ならテクスチャペイントで直塗りできますが、本格的にやるならUV展開とテクスチャの書き直しが必要になってきます。 特に致命的なのは三角面で出したモデルを四角面に変換するとUVがズレる問題です。 これはP2.0なら生成時に四角面も選べるので、それで出力することで回避できますが、四角面だとポリゴン数が三角面に比べて少ない設定しか選べないため、ここはトレードオフになります。自分は三角面でポリゴンいっぱいの方が好きなので、三角面を選びました。 キャラクターモデリングは一概に難易度を決められる物ではなく、モデルのデザインにもよるので、P2.0なら初心者の方でも作れるデザインがあると思います。 （このポストのモデルは特段難しいと思う） スカートがなければ割と簡単どころか、ボタンぽちぽちするだけでできちゃうと思うので、これもまたどこかで書けるといいな〜 総評すると、よくある3Dモデル生成AI系の「なんかぱっと見いい感じ」の方向ではなく、ちゃんと「実用的な方向に向かっている」みたいなそんな気がしました！ 造形力でいえばP1.0もなかなかの物だったので（キャラクターモデリングにおいては）、びっくりするくらいの進化ではないんですが、冒頭に挙げた「素体まで作ってくれる」みたいに、「モデルは一般的にどう作られるのか？」をちゃんと意識されているような気がします（語彙力なくてすみません） キャラクターモデリングしかまだ試せていないので、色々検証していこうと思ってます。show more

💡 動画生成AIは余白で動きを決める 🎥 左右の動画を見比べてみましょう。 右のこぢんまりとした動きに対して、左のキャラは身体全体を使った動きをしてます。 実はこの二つの動画「同一プロンプト・同一素材」で生成してます。 なら違いは何か？左の素材画像に対して余白を追加しているのです。 余白の分だけ、キャラクターの動く余地が生まれます。同じプロンプトなのに、より大きい動きが可能になります。逆に動きが大きい場合は、対象キャラクターをフレームギリギリまで近づけることで動きを抑制できます。 もちろんプロンプトでも動きを調整できます。しかし、動きのポテンシャルは余白の有無で決まっているように感じるのです。... 以下は優先度の仮説です 1. 動かすだけの余白があるか（フレームとキャラクターの比率=提供画像） 2. その中でどれだけ動かすか（プロンプト） 個人的にはかなり本質的な発見です。 最終的なショットと生成に相応しいショットが異なることを示すからです。このギャップを認識していないと、動画生成AIから十分な性能を引き出せないことになります。 あくまでも生成用にショットサイズを調整して出力、その結果を後でトリミング＆アップスケールで編集に回す、という工夫が必要かもしれません。 生成AIは実写やアニメと異なり、アクター/モデルとフレームの関係が逆転しています。フレームが先で、その中で初めて演技もキャラクターも生成されるのです。この違いを認識することが重要なのではないかと思いました。show more

【誰も期待していない私たちが、世界を救う】 今回は、僕が大好きなゲーム、 『FINAL FANTASY X』のお話から。 ※以下、作品のセリフが出てきます。 FFXへのリスペクトを込めて書いています。 ↓以下動画内文章↓ 「誰もわれわれには期待していない。... 見返してやろうじゃないか。 落ちこぼれの召喚士と ザナルカンドから来た男。 出世の道からはずれた僧兵。 そんな連中が『シン』を倒したら、 きっと痛快だぞ」 『FINAL FANTASY X』に登場する、 ブラスカの言葉です。 今の僕は世間の皆様から 「詐欺師だ」 「虚言癖がある」 「悪党だ」 と言われていることは存じ上げています。 自分自身の行動については、反省すべきところ多々多々あります。 だからこそ、 今さら「本当の僕は違うんです」と 言葉だけで説明するつもりもありません。 それよりも、 そんな僕がこれから何をするのか。 そこを見ていただきたいと思っています。 僕は、平和を願っています。 人々が抱えている睡眠の悩みを解決するために、これからも活動していきたいと思っています。 それ自体は、決して悪いことではないはずです。 一週間のライブ配信についても、きっと僕の失敗を期待している人は少なくないでしょう。 そう思われていても、僕は一向に構いません。 ブラスカは、 「見返してやろうじゃないか」 と言いました。 僕は、少し違います。 誰かを見返したいわけではありません。 評価されたいからやるわけでもありません。 ただ、 今の自分にできることを、 一つずつ積み重ねていきたい。 そう思っています。 そして、もし、 「最低な評価をされていた男でも、 人の役に立つことができる」 ということを証明できたら。 それは、きっと痛快なことなんじゃないかなと思います。 もしかしたら 「自分は最低だ」 「誰からも認めてもらえない」 そう悩んでいる方も いらっしゃるかもしれません。 でも、人生は 「今どう見られているか」だけで 決まるものではないと思っています。 これから結果を出せばいい。 これから行動を変えればいい。 これから誰かの役に立てばいい。 人の見る目が変わるのは、その後なのかもしれません。 僕自身が、その姿を見せていきたいと思っています。 9月10日から16日まで、 一週間のライブ配信を行います。 そこで僕が何をするのか。 本当に最後まで元気にやり切れるのか。 ぜひ、見ていてください。 そして、もし僕の姿を見て、 「自分も、もう一度やってみよう」 と思っていただけたなら… このライブや私の生き様が、誰かの人生をより良くするための一つのきっかけになれば、 僕はとても嬉しく思います。 話は変わりますが……。 『FINAL FANTASY X』をプレイしたのは、 僕がまだ高校生の頃でした。 父親になった今、改めてプレイしてみると、 ジェクトやブラスカの言葉が、当時とはまったく違って聞こえます。 同じ作品なのに、自分が歳を重ねたことで見えるものが変わっている。 人生も、きっと同じなのだと思います。 昔は意味が分からなかったことが、何年か経ってから分かることがある。 昔は何とも思わなかった言葉が、今になって心に刺さることがある。 だからこそ、 「素晴らしい」と思った作品は、 歳を重ねてから何度も見返してみる。 それもまた、人生をより深く、豊かにしてくれる一つの方法なのかもしれません。show more

【ご報告】卓球しか知らなかった自分が、新しい挑戦を始めます。 卓球しか知らなかった自分が、まさか「システム」を作るとは思っていませんでした。 自分はこれまで、卓球の世界で生きてきました。 選手、コーチ、そして卓球場の経営。 でも施設を運営していて、あることに気づきました。 日本には、使われていない施設が多すぎる。 体育館、スタジオ、会議室、教室。 本当はもっと活用できるはずなのに、 ・鍵の受け渡し... ・予約管理 ・決済 このあたりが面倒で、貸し出されていない場所が多い。 正直、「もったいないな」と思っていました。 そこで、自社の給湯室をレンタルオフィスにリノベーションして実験してみました。 小さなスペースでも、仕組みがあれば収益化できるのか。 結果は、できました。しかも想像以上に。 その時に思いました。 「あ、これもっと大きな仕組みにできるな」と。 だから作りました。 施設を無人で収益化するシステム「ROOMKEY」 予約、決済、入室。 すべて自動です。 施設オーナーは、鍵の受け渡しも受付も必要ありません。 つまり、施設は無人で稼げる。 最初は自分の卓球場のために作った仕組みでした。 でも今は思っています。これは卓球場だけの話じゃない。 スタジオ、会議室、体育館、地方の空き施設。 日本にはまだまだ活用できる場所がたくさんある。 ROOMKEY、本日公開しました。 もし面白いと思ったら、拡散してもらえると嬉しいです。 ここから、日本中の施設をもっと使える場所にしていきます。show more

このたび、Kling AI（Kling AI ）のCPPに参加させていただくことになりました🎉 これまで多くの作品でKlingを利用してきたので、このような形で関わらせていただけることをとてもうれしく思います！ これまで以上にさまざまな映像表現に挑戦し、たくさんの作品を制作・共有していきたいです！ #klingai