ろてじん

@rotejin • 6,299 subscribers

AIキャラに関する情報を中心に呟いてます。最近はAIのVtuber「妹尾トマリ」の開発に注力中。妹尾トマリCV：村瀬未帆様（@iris_eternal） https://t.co/Tm7oUrU7QX

Shorts

作りたいなとメモしてたものをまとめてFable先生に投げてる。作らなくても良いものも多いんだけど作れば満足なのでとりあえず全部作っちゃう。

作りたいなとメモしてたものをまとめてFable先生に投げてる。作らなくても良いものも多いんだけど作れば満足なのでとりあえず全部作っちゃう。

236,183 görüntüleme

こりゃ・・・イラスト1枚からAIでパーツ分割→AIで表情差分→Codexで完成。もしかしてかなり画期的なアバター表現なのでは？

こりゃ・・・イラスト1枚からAIでパーツ分割→AIで表情差分→Codexで完成。もしかしてかなり画期的なアバター表現なのでは？

190,804 görüntüleme

ちょいと立て込んでて最新のAIモデルを触れてなかった。リハビリがてらIrodori-TTSをOpus5で更に最適化&高速化。推論0.25～0.45秒くらいかな。たしかに速くなってる。話速も自然に変えられるようになりました。

ちょいと立て込んでて最新のAIモデルを触れてなかった。リハビリがてらIrodori-TTSをOpus5で更に最適化&高速化。推論0.25～0.45秒くらいかな。たしかに速くなってる。話速も自然に変えられるようになりました。

94,542 görüntüleme

MetaのAIにキャラクターシート（今回は2枚）渡して色々なポージングの画像を生成したら、出力が早い上にキャラの一貫性がかなり高かった。これはLoraの学習素材とか作りやすいと思う。16枚を一気に生成してみました。

MetaのAIにキャラクターシート（今回は2枚）渡して色々なポージングの画像を生成したら、出力が早い上にキャラの一貫性がかなり高かった。これはLoraの学習素材とか作りやすいと思う。16枚を一気に生成してみました。

27,591 görüntüleme

話題のniji7で出力して本日の「動くPNGTuber」を作りました。Shoostをかけて雰囲気もUP。慣れたら30分くらいでアバターが作れます。複数のAI動画を一気に流し込んでリップシンク出来るようにするバッチ処理のテスト中。niji7は出てくるキャラの顔がオシャレ可愛い。

話題のniji7で出力して本日の「動くPNGTuber」を作りました。Shoostをかけて雰囲気もUP。慣れたら30分くらいでアバターが作れます。複数のAI動画を一気に流し込んでリップシンク出来るようにするバッチ処理のテスト中。niji7は出てくるキャラの顔がオシャレ可愛い。

123,648 görüntüleme

顔メインに動かして首から下はアイテムとしてPNG画像読み込みで背面レイヤーにして合体させたらいい感じになるのではと思ってのテスト中👀

顔メインに動かして首から下はアイテムとしてPNG画像読み込みで背面レイヤーにして合体させたらいい感じになるのではと思ってのテスト中👀

43,332 görüntüleme

ぐるぐるを作ったので次はぴょこぴょこを作ってる。

ぐるぐるを作ったので次はぴょこぴょこを作ってる。

41,520 görüntüleme

MotionPNGTuberの複数アセット切り替えはどんな感じが使いやすいかなと模索中。これはブラウザ版再生専用パッケージを少し改造したものです。

MotionPNGTuberの複数アセット切り替えはどんな感じが使いやすいかなと模索中。これはブラウザ版再生専用パッケージを少し改造したものです。

41,932 görüntüleme

Videos

Anya Rossi

sweetdream.ai

SweetDream.ai•Sponsored•Livecam

Watch Anya Live

Anya is streaming live right now! Join her private show and enjoy exclusive content.

Exclusive private shows

1.2k viewers online

Private Show

Join now for exclusive access

Free preview available • Premium content

ぐるぐるトマリちゃんがリアルタイムにお話しできるアバターに。Live2Dとも3Dモデルとも一味違う表現になったかな。これが真の「動くPNGTuber」なのでは？笑

ぐるぐるトマリちゃんがリアルタイムにお話しできるアバターに。Live2Dとも3Dモデルとも一味違う表現になったかな。これが真の「動くPNGTuber」なのでは？笑

395,597 görüntüleme • 2 ay önce

本日の「動くPNGTuber」自分の作ったボイスモデルと動画があればバ美肉AITuberなんかも作れます。完全にキャラと声が合ってないけど…。自作アバター作りにもどうぞ🎶 AIボイスモデル：ろてじん（長老ボイス）

本日の「動くPNGTuber」自分の作ったボイスモデルと動画があればバ美肉AITuberなんかも作れます。完全にキャラと声が合ってないけど…。自作アバター作りにもどうぞ🎶 AIボイスモデル：ろてじん（長老ボイス）

574,863 görüntüleme • 8 ay önce

Irodori TTS v4でファインチューニングして参照音源16個のWAV（計118.3秒）でTTSしてみました。動画も音声もキャプチャまんま無編集です👀

Irodori TTS v4でファインチューニングして参照音源16個のWAV（計118.3秒）でTTSしてみました。動画も音声もキャプチャまんま無編集です👀

71,688 görüntüleme • 1 ay önce

「動くPNGTuber」使い方のnoteを書く為に1つ作ってみました。大きめの口でも、口元の自動切り抜きで一応こんな感じです（開閉時の中間の口を手作業で選んで調節した方が綺麗に滑らかにはなるけど）とりあえず何か喋ってる動画だけ入れれば、口素材PNGを用意しなくても作れます。ボイスモデルCV：村瀬未帆様

「動くPNGTuber」使い方のnoteを書く為に1つ作ってみました。大きめの口でも、口元の自動切り抜きで一応こんな感じです（開閉時の中間の口を手作業で選んで調節した方が綺麗に滑らかにはなるけど）とりあえず何か喋ってる動画だけ入れれば、口素材PNGを用意しなくても作れます。ボイスモデルCV：村瀬未帆様

196,040 görüntüleme • 8 ay önce

「動くPNGTuber」を改造して色々な新しい表現も出来そうかなぁと言う動画（このモジュールはまだ公開してないけど）手動でシーンを切り替えてもいいし、自動シーン切り替えも出来る。特に動画をループにしなくても良いのでAI動画との相性が抜群にいい感じです。

「動くPNGTuber」を改造して色々な新しい表現も出来そうかなぁと言う動画（このモジュールはまだ公開してないけど）手動でシーンを切り替えてもいいし、自動シーン切り替えも出来る。特に動画をループにしなくても良いのでAI動画との相性が抜群にいい感じです。

135,611 görüntüleme • 8 ay önce

こちら「ぷるぷるPNGTuber」キャラ動きの調整方法の解説動画になります🎶ボイスはIrodoriTTSです🎶 トマリCV：村瀬未帆様

こちら「ぷるぷるPNGTuber」キャラ動きの調整方法の解説動画になります🎶ボイスはIrodoriTTSです🎶 トマリCV：村瀬未帆様

42,655 görüntüleme • 2 ay önce

同じモデルなんですが、Irodori TTS v4は雑談風セリフ+感情強めのセリフを良い感じに共存させられてる感じがする。今回のは感情表現強めセリフ。

同じモデルなんですが、Irodori TTS v4は雑談風セリフ+感情強めのセリフを良い感じに共存させられてる感じがする。今回のは感情表現強めセリフ。

25,063 görüntüleme • 1 ay önce

GoogleのTTSがアップデートされたようなので試してみた。なんか2秒くらいの所で喉の奥でツバを飲み込む音みたいなのが入ってる。息遣いも…いいね。

GoogleのTTSがアップデートされたようなので試してみた。なんか2秒くらいの所で喉の奥でツバを飲み込む音みたいなのが入ってる。息遣いも…いいね。

131,503 görüntüleme • 9 ay önce

既存のPNGTuberを作る工程に「髪のパーツ」追加のみでリッチ感が出るんじゃないかと試してみた。音声入力でリップシンク+お顔がピョコピョコ動きます。髪のサラサラ感が…なかなか良い。

既存のPNGTuberを作る工程に「髪のパーツ」追加のみでリッチ感が出るんじゃないかと試してみた。音声入力でリップシンク+お顔がピョコピョコ動きます。髪のサラサラ感が…なかなか良い。

46,065 görüntüleme • 2 ay önce

PNGTuberの進捗。もしやAI動画を活用した方が作るのが簡単なのではと思い作ってみた。動画は顔を固定で髪の毛や目を動かしてスタートエンド同じ画像でループ動画に。口の部分だけPNG画像でリップシンク化。なんかこれが一番綺麗な気がしてきた。トマリちゃんボイスモデル CV：村瀬未帆様

PNGTuberの進捗。もしやAI動画を活用した方が作るのが簡単なのではと思い作ってみた。動画は顔を固定で髪の毛や目を動かしてスタートエンド同じ画像でループ動画に。口の部分だけPNG画像でリップシンク化。なんかこれが一番綺麗な気がしてきた。トマリちゃんボイスモデル CV：村瀬未帆様

118,678 görüntüleme • 8 ay önce

Opus4.8に人間の腰痛の原因の仕組み解説3Dアニメーションを作ってもらった。音も動きも付けて仕上げてきた。これはGPT5.5では出来ない事かも知れん。

Opus4.8に人間の腰痛の原因の仕組み解説3Dアニメーションを作ってもらった。音も動きも付けて仕上げてきた。これはGPT5.5では出来ない事かも知れん。

47,407 görüntüleme • 3 ay önce

自分のオリジナルキャラでBPMに合わせたCatJammerみたいな首振りが出来るモードを搭載🔥笑

自分のオリジナルキャラでBPMに合わせたCatJammerみたいな首振りが出来るモードを搭載🔥笑

30,777 görüntüleme • 2 ay önce

Irodori-TTSのv3が出たと言う事で自分の声でモデルを作ってTTSしてみました。これ普通にポッドキャストで流れてても音声合成だと思わないんじゃないかな。ちなみにトーク内容はフィクションです。アライグマは食べたことないので…ｸﾏｧ🦝

Irodori-TTSのv3が出たと言う事で自分の声でモデルを作ってTTSしてみました。これ普通にポッドキャストで流れてても音声合成だと思わないんじゃないかな。ちなみにトーク内容はフィクションです。アライグマは食べたことないので…ｸﾏｧ🦝

48,913 görüntüleme • 3 ay önce

キャラがフヨフヨ動いている動きはどうやったら画像だけでドーパミンドバドバ系の映像が作れるか試してたもの。これは音源のビート検出してそれに合わせて画像を自動で合わせて動かす実験です。

キャラがフヨフヨ動いている動きはどうやったら画像だけでドーパミンドバドバ系の映像が作れるか試してたもの。これは音源のビート検出してそれに合わせて画像を自動で合わせて動かす実験です。

39,024 görüntüleme • 3 ay önce

動くPNGTuber（MotionPNGTuber）を使うと、こんな感じに配信が出来ちゃいます。こちらAITuberのトマリちゃん初配信から抜粋。30秒あたりからぐいーっとカメラアングルも変えたりしてます。

動くPNGTuber（MotionPNGTuber）を使うと、こんな感じに配信が出来ちゃいます。こちらAITuberのトマリちゃん初配信から抜粋。30秒あたりからぐいーっとカメラアングルも変えたりしてます。

57,576 görüntüleme • 5 ay önce

昭和生まれの人は電話番号を暗記してたらしい・・・！？

昭和生まれの人は電話番号を暗記してたらしい・・・！？

27,654 görüntüleme • 3 ay önce

PNGTuberは簡単だし可愛いけど…もしかしたら表情差分を作るのがそもそも大変（面倒）なのでは？と思い…画像1枚を用意すれば差分を作れるアプリを作ってみた。思い立ったらアプリ化しちゃえ的な。

PNGTuberは簡単だし可愛いけど…もしかしたら表情差分を作るのがそもそも大変（面倒）なのでは？と思い…画像1枚を用意すれば差分を作れるアプリを作ってみた。思い立ったらアプリ化しちゃえ的な。

52,880 görüntüleme • 7 ay önce

動くPNGTuber進捗。口の形状もずっと同じよりリアルタイムに変えられた方が面白いかなと思い実装。生配信でも使えるけど、動画を作る際にも便利かもしれない。これなら口の形プリセットは何度も使い回しも出来るね。実質、動画を解析するだけで作れるようになった。ボイスモデルCV：村瀬未帆様

動くPNGTuber進捗。口の形状もずっと同じよりリアルタイムに変えられた方が面白いかなと思い実装。生配信でも使えるけど、動画を作る際にも便利かもしれない。これなら口の形プリセットは何度も使い回しも出来るね。実質、動画を解析するだけで作れるようになった。ボイスモデルCV：村瀬未帆様

55,955 görüntüleme • 8 ay önce

複雑にするならLive2DやAEを使えば良いんだけど、シンプルにオブジェクトを配置してササッとモーションを付けられたら良いのではないか…と言う実験。

複雑にするならLive2DやAEを使えば良いんだけど、シンプルにオブジェクトを配置してササッとモーションを付けられたら良いのではないか…と言う実験。

21,177 görüntüleme • 2 ay önce