Video wird geladen...

Video konnte nicht geladen werden

Zur Startseite

前に動画を上げた、NVIDIAのMotionBricksのデモをブラウザで触れるようにしました (PCのChrome推奨。モデルのDLが300MBほど発生します) 矢印キーで操作するとその場で動きをAIが生成します。(要所の姿勢だけ事前用意で、間を補完してます) 自分のVRMもドラッグで試せます。

12,039 Aufrufe • vor 4 Tagen •via X (Twitter)

9 Kommentare

Profilbild von monoradio
monoradiovor 4 Tagen

MotionBricksは「直前の数コマ」と「少し先の目標姿勢」を渡すと、その間の1〜2秒の動きを作るモデルです。キー入力に合わせて目標を置き直しながら、1回0.1秒ちょっとで生成し続けてます。全部ブラウザ内(WebGPU)で動いてます 目標姿勢はKimodo などで事前に作成しています。

Profilbild von monoradio
monoradiovor 4 Tagen

事前用意した目標姿勢です。 今の状態から、最後にこの姿勢になっているようにモデルが辻褄を合わせを行ってます。

Profilbild von SketchAmp Games
SketchAmp Gamesvor 4 Tagen

めちゃくちゃ動きいいですね。参考になります。

Profilbild von AiDeNier(アイデニール)
AiDeNier(アイデニール)vor 4 Tagen

びたーん!って最後に転ぶところ、かわいいです🥰

Profilbild von 一只咸鱼
一只咸鱼vor 4 Tagen

厉害了

Profilbild von songlairui
songlairuivor 3 Tagen

@bot 在ssh ms上部署这个,把最新你部署的项目列一下(ms上的)

Profilbild von ぽの|AIで最初の売上づくり
ぽの|AIで最初の売上づくりvor 3 Tagen

ブラウザで触れるようにしたの、ありがたい!見るだけより自分で動かした方が、何がすごいのか一気に分かるよね。

Profilbild von Tommy
Tommyvor 4 Tagen

Keys still fill the motion

Profilbild von Tobaru
Tobaruvor 4 Tagen

ドットアニメで苦労してるけど、もう3Dで作ったほうが早い時代なのかなぁ

Ähnliche Videos

ローカルMiniMax H3で、声つきの約7秒動画をリアルタイムに連続生成してみました。RTX 5090+DGX Spark互換機3台を使いました。 動画の完成間隔は平均約6.9秒。RTX 5090が動画を生成している間に事前・事後の処理をDGX Sparkが行い、途切れずに再生します。 RTX 5090単体でやったときは15秒単位でしたが、7秒単位になったことで、返事・話題・動作・衣装を次々に切り替えられるようになりました。解像度も320×576から384×704(画素数約1.5倍)に上げられたので画像の崩れが減り、体験がかなり良くなりました。 PDMD 2step LoRAは音声に問題があるため、先にIrodoriで音声を作り、H3の音声VAEで「音声latent」に変換して生成時のガイドとして渡し、口の動きを合わせています。最終的な音は、Irodoriの音声をそのまま動画に重ねています。 動画生成モデルなので、従来のVTuberのように衣装ごとにモデルを作り込まなくていいのは楽ですが、何が起きるかわからない怖さもあります。 なお、コメントに7秒で返せるわけではありません。1つの返事を作る処理には約14.4秒、今回のデモでは再生待ちを含めて約16秒かかります。応答の待ち時間はまだ課題です。 ※コメントと返答文は事前に用意したデモです。実際にAITuberをやるならもう一つモデルを動かすPCが必要になりそうです。冒頭2本の挨拶は事前生成、ドット絵化は後処理です。

鈴木憂一 | Highdrama

77,589 Aufrufe • vor 1 Monat

シンギュラリティのトリガーである「再帰的自己改善」は、すでに少し前に起きているという。もちろん、まだ全自動ではないが、「進歩のどこまでがAIでどこまでが人間なのか」は曖昧になってきている。著者性が溶けるこの感覚こそ、分単位で進むシンギュラリティの手触りなのだ。 サリム・イスマイル「再帰的自己改善(RSI)がシンギュラリティの本当のトリガーだという話は、以前からしてきました。そしてそれは、すでに少し前に起きているんです。だから今やっているのは、その道筋を加速しているだけです。私たちは今この瞬間にも、産業時代を恒久的に抜けつつあります」 デイブ・ブランディン「ええ、シンギュラリティが分単位で展開していく様子は、私が経験した中で最も興味深いものだと本当に思いますし、アレックスの言うとおりです。いまは、人間がループの中にいて貢献している時期ではあるのですが、進歩のどこまでがAIでどこまでが人間なのかが、本当に曖昧なんです。実際にコーディングしていると、『あれは自分のアイデアだったのか?』となります。 半分は自分のアイデアのようでも、AIが別の案を提案してきて、それを採用していくうちに、結局それが自分のアイデアだったのかどうかも分からなくなります。ただ、いまのモードでは、こうしたコアアルゴリズムの研究の多くが、『500本のテストを走らせて、どのハイパーパラメータが良かったか、どのニューラルトポロジーが良かったかを教えて』という形になっています。相対論を発明したり発見したりするような話ではありません。 いろいろな試行を大量に回して、うまくいったものを選んで再デプロイし、そうするとより賢いAIになって、さらに多くの試行をする——その繰り返しです。私たちはその道筋をかなり進んでいる可能性が高いと思います」

Tsubame

15,386 Aufrufe • vor 8 Monaten

交流ロボコンで技術賞をいただきました! 茨城高専Bチーム たまたま完熟金柑(タマタマカンジュクキンカン)です 安定完全自動を目指して技術開発をメインでやってました 本番でも98%を自動で競技を終わらせることができました! またRealSense画像認識でアヒルの自動回収をしたり、LiDARx3の最強自己位置推定をやりました 自律移動 mermaidを使った状態遷移図をもとに自律移動をし、競技をすべてこなすことができます 非線形最適化で事前に経路を引いたり、A*で動的に生成したりできます 自動の停止精度は1.2cmでした 6m/s 8m/s2で自動ができましたが、安全面やカーブ時の安定性の問題から3m/sに制限していました(動画は手動時のものです) 画像認識 担当:HK YOLOv8を使いアヒルを検出、Depthから位置を推定しています (アノテーション5k枚) 検出結果から経路を引きPurePursuitで追従することで正確にアヒルを回収できます ✞最強の自己位置推定✞ 事前にホイールオドメトリのバイアスなどをマルチIMUを使い測定し、オドメトリの精度を向上させていました MCLで位置推定をしていました 400hzで動作しましたがLiDARが40Hz x2 + 30Hzだったので100Hzで動かしていました 8m/sで動かした時も安定して位置推定ができており、大会期間中に3回しか自己位置がずれませんでした 物理シミュレーター 担当: HK ros2 for unity を使って物理シミュレーションをしていましたが、実機が思ったより早く完成したので途中から使わなくなってしまいました ボトル検出 LiDAR点群からペットボトルの位置を推定し自動で回収します yaw角と横方向を先に揃えて最後に後ろにまっすぐ下がることで安定して回収ができました コントローラー 担当: HK いつも通りros2 for unity androidでアプリを作成し直接通信しています こたっく 様によりjazzyに対応させることができたのですべてjazzyに移行しました map path goal current poseの表示やinitial poseのpublishができるので試合中rviz2をみることなく終わることができました またコントローラーの角度を取得し、操縦者の向いている方を前として操縦できるようになってます (手動操縦ほぼしなかったけど) #交ロボ #ROS2

Kazusa Hashimoto 橋本千聡

34,610 Aufrufe • vor 7 Monaten

「仕事がなくなる」よりも深いのは「意味がなくなる」恐れだ。産業化は生産を工業化しただけでなく、アイデンティティまで工業化した。「何をしているの?」が「あなたは誰?」になった世界で、AIがタスクを肩代わりし始めれば、次に崩れるのは自己像そのものかもしれない。 アクラム・アワド「AIは私たちを無用にしてしまうのでしょうか? もし働かないなら、私たちは誰なのでしょうか? もし生み出さないなら、私はまだ意味があるのでしょうか? 何世紀にもわたって、私たちは自分のアイデンティティや価値を『何をしているか』に結びつけてきました。農家、工場労働者、コーダー、コンサルタント——仕事と職は、現代の社会における秩序と定義の原理になりました。 ですが、いつもそうだったわけではありません。産業革命の前は、私たちのアイデンティティは信仰や家族や共同体から来ていました。仕事は人生の一部でしたが、それ自体が人生の定義ではありませんでした。そこに工業化がやって来て、私たちは生産だけでなく、アイデンティティまでも工業化しました。『何をしているの?』は『あなたは誰?』の言い換えになったのです。 そして今日のAIは、そのモデルを完全に解体しつつあります。AIはあらゆるタスクを自動化しています。製造や物流、デザイン、顧客対応、さらには創造的な仕事にまで。いまのAIは曲を作り、コードを設計し、本を挿絵化し、そしてそれ以上のこともできます。実際、世界経済フォーラムは、2025年までにAIが人間より多くのタスクを行い、何億という雇用が危険にさらされると予測しています。 ですが、これは仕事だけの話ではありません。意味の話です。尊厳の話です。かつて私たちに価値を与えていたただ一つのものが、時代遅れになったときに何が起きるのか、という話です。そして注意しなければ、私たちは大恐慌に向かうかもしれません。ですが今回は、所得の大恐慌ではなく、アイデンティティの大恐慌です」

Tsubame

93,869 Aufrufe • vor 10 Monaten