Video wird geladen...

Video konnte nicht geladen werden

Beim Laden dieses Videos ist ein Problem aufgetreten. Dies könnte an einem vorübergehenden Netzwerkproblem liegen oder das Video ist möglicherweise nicht verfügbar.

NVIDIAがカメラ制御動画から3D空間を構築する「Lyra 2.0」フレームごとの幾何情報参照と誤差補正学習により長時間の探索でも空間の忘れや画質低下を防ぎ高精度な3DGSやメッシュを出力。物理シミュレータにも展開可能。情報元はリプ欄。

Sadao Tokuyama

7,507 subscribers

17,514 Aufrufe • vor 15 Tagen •via X (Twitter)

Anya Rossi• Live Now

Private livecam show

0 Kommentare

Keine Kommentare verfügbar

Kommentare vom Original-Post werden hier angezeigt

Ähnliche Videos

ケンブリッジ大等の研究チームが「LiteReality-Agent」をOSS公開 🔹iOS LiDARスキャンから部屋を3D空間化 🔹AIエージェントがコードを編集・反復評価してインタラクティブ空間を自動構築 🔹テキストでの模様替えやBlender/シミュレータ出力に対応情報元はリプ欄。

ケンブリッジ大等の研究チームが「LiteReality-Agent」をOSS公開 🔹iOS LiDARスキャンから部屋を3D空間化 🔹AIエージェントがコードを編集・反復評価してインタラクティブ空間を自動構築 🔹テキストでの模様替えやBlender/シミュレータ出力に対応情報元はリプ欄。

Sadao Tokuyama

21,179 Aufrufe • vor 11 Tagen

ロボット向け空間メモリ技術「FARM」。物体の特徴と周囲との位置関係を統合した構造化記憶をリアルタイムに構築。 15,000㎡の広大な建設現場でも「車の隣のトイレ」といった相対的な位置関係を含む言語指示から、対象物を高精度に特定して自動で探索できます。情報元はリプ欄。

ロボット向け空間メモリ技術「FARM」。物体の特徴と周囲との位置関係を統合した構造化記憶をリアルタイムに構築。 15,000㎡の広大な建設現場でも「車の隣のトイレ」といった相対的な位置関係を含む言語指示から、対象物を高精度に特定して自動で探索できます。情報元はリプ欄。

Sadao Tokuyama

19,588 Aufrufe • vor 20 Tagen

#時間の面影東京巡回展、終幕しました。おかげさまで約4000名を超えるお客様にお越しいただきました。ほんとうにありがとうございます。またどこかでお会いしましょう。 - 時間は空間になり、空間は時間になる。時間は存在しない。 - 時間の面影 resemblance of time - はじめに、以下の媒体あるいは概念について、本展の着想の元になった考察を述べてみます。写真見る人に「時間」が委ねられる。時間は伸び縮みする。動画作る人が「時間」を意図している。時間は制御される。時間ある流れの何かと何かの「間（あわい）」にあるもの。そのすべての移ろい。空間ある場所の「空（くう）」にあるもの。そのあらゆる広がり。 - この考察は、あらゆるものごとは常に変化しながらその都度失われる、という道理を撮影という行為を通し実感することで導かれたものです。例えば、一瞬の出来事を永遠のように感じたり、永い記憶を一瞬のように感じられることはありませんか。そして、何もないところにこそ確かな存在を見出すことも。あるようでないは、ないようで、ある。では、時間は存在しない、とするならば？本展はそのような思考についての実験であり、時間と空間の感覚への問いを考えていく試みでもあります。濱田英明

#時間の面影東京巡回展、終幕しました。おかげさまで約4000名を超えるお客様にお越しいただきました。ほんとうにありがとうございます。またどこかでお会いしましょう。 - 時間は空間になり、空間は時間になる。時間は存在しない。 - 時間の面影 resemblance of time - はじめに、以下の媒体あるいは概念について、本展の着想の元になった考察を述べてみます。写真見る人に「時間」が委ねられる。時間は伸び縮みする。動画作る人が「時間」を意図している。時間は制御される。時間ある流れの何かと何かの「間（あわい）」にあるもの。そのすべての移ろい。空間ある場所の「空（くう）」にあるもの。そのあらゆる広がり。 - この考察は、あらゆるものごとは常に変化しながらその都度失われる、という道理を撮影という行為を通し実感することで導かれたものです。例えば、一瞬の出来事を永遠のように感じたり、永い記憶を一瞬のように感じられることはありませんか。そして、何もないところにこそ確かな存在を見出すことも。あるようでないは、ないようで、ある。では、時間は存在しない、とするならば？本展はそのような思考についての実験であり、時間と空間の感覚への問いを考えていく試みでもあります。濱田英明

濱田英明

17,212 Aufrufe • vor 1 Jahr

数枚の画像から高品質な3D空間を生成するAI「GenRecon」のコードが公開。生成AI（Trellis.2）の知見を空間全体に拡張し、入力画像とズレなく一致させることに成功。複数視点に対応し、既存の最先端手法を16%も上回る「前例のない精度」で室内を3D化可能に。詳細はリプ欄。

数枚の画像から高品質な3D空間を生成するAI「GenRecon」のコードが公開。生成AI（Trellis.2）の知見を空間全体に拡張し、入力画像とズレなく一致させることに成功。複数視点に対応し、既存の最先端手法を16%も上回る「前例のない精度」で室内を3D化可能に。詳細はリプ欄。

Sadao Tokuyama

20,133 Aufrufe • vor 1 Monat

魚眼画像からの3DGS作成で5Msplats。肩に360度カメラを乗せてハンズフリーでの撮影なので、色々と制約はあるのですが、魚眼だと以前のやり方より高い精度のアライメントが得られやすく、画質も向上します。

魚眼画像からの3DGS作成で5Msplats。肩に360度カメラを乗せてハンズフリーでの撮影なので、色々と制約はあるのですが、魚眼だと以前のやり方より高い精度のアライメントが得られやすく、画質も向上します。

tetraface/metaseq

13,969 Aufrufe • vor 1 Monat

LLMが遂にテキストを脱皮し「現実世界」の3D空間をガチで理解し始めた。 SpatialLMは3D点群にLLMの推論力を適用し、壁やドアの構造、空間の繋がりを解釈して構造化データを出力する。言語モデルを空間知能へ拡張するブレイクスルー。コードも論文もオープンに公開。

LLMが遂にテキストを脱皮し「現実世界」の3D空間をガチで理解し始めた。 SpatialLMは3D点群にLLMの推論力を適用し、壁やドアの構造、空間の繋がりを解釈して構造化データを出力する。言語モデルを空間知能へ拡張するブレイクスルー。コードも論文もオープンに公開。

Sadao Tokuyama

227,845 Aufrufe • vor 4 Monaten

🚀 PixAI 画像から動画アップデート：v4.0 Previewシリーズ登場 PixAI ご利用の皆さまへ次世代の画像から動画生成（I2V）体験「v4.0 Previewシリーズ」をご紹介します。本アップデートは単なるモデル品質の向上にとどまらず、より柔軟な制作体験を提供し、あなたのアイデアをさらに自由に形にできるようになりました。 🎬 2つのモデルから選択・v4.0 Preview — フラッグシップモデル。最高レベルの映像品質、繊細な動き、精密なカメラ制御を求めるクリエイター向け。・v4.0 Lite Preview — より手軽でコストを抑えたモデル。日常的な制作や、アイデアを素早く動画化するのに最適。 ✨ v4.0 Preview専用機能・マルチ画像リファレンス — 複数の参照画像で生成をガイド。キャラクターや構図、動きのロジックをより正確に固定できます。・動画リファレンス — 参照動画を使って見た目や動きをコントロール。より直感的に理想の結果へ近づけます。・最大15秒の動画生成が可能に — 物語に、命を吹き込むための時間を。 ✨ 主な特徴・より滑らかでリアルな動き動きの物理表現が向上し、フレーム間の動作が自然でスムーズになります。・複雑なシーンでも安定したパフォーマンス難易度の高いアクションや長時間の動きにも強く、より大胆な表現が可能になります。・シネマティックなカメラ制御の強化カメラワークがより意図的かつ操作しやすくなり、ダイナミックな映像演出が簡単に実現。・解釈力の向上と豊かな生成プロンプトへの忠実さに加え、創造的な補完力も強化。シンプルなアイデアからでも、より完成度の高いシーンを生成します。・映像全体の一貫性向上キャラクターやスタイル、背景要素の統一感が高まり、より洗練された仕上がりになります。 💡 ご注意 Preview版では一部未対応の内容があります。生成に問題がある場合は、プロンプトやリファレンス素材の調整をお試しください。今後さらに高度な機能や制作ツールも順次追加予定です。 👉 v4.0 Previewシリーズを今すぐ体験

🚀 PixAI 画像から動画アップデート：v4.0 Previewシリーズ登場 PixAI ご利用の皆さまへ次世代の画像から動画生成（I2V）体験「v4.0 Previewシリーズ」をご紹介します。本アップデートは単なるモデル品質の向上にとどまらず、より柔軟な制作体験を提供し、あなたのアイデアをさらに自由に形にできるようになりました。 🎬 2つのモデルから選択・v4.0 Preview — フラッグシップモデル。最高レベルの映像品質、繊細な動き、精密なカメラ制御を求めるクリエイター向け。・v4.0 Lite Preview — より手軽でコストを抑えたモデル。日常的な制作や、アイデアを素早く動画化するのに最適。 ✨ v4.0 Preview専用機能・マルチ画像リファレンス — 複数の参照画像で生成をガイド。キャラクターや構図、動きのロジックをより正確に固定できます。・動画リファレンス — 参照動画を使って見た目や動きをコントロール。より直感的に理想の結果へ近づけます。・最大15秒の動画生成が可能に — 物語に、命を吹き込むための時間を。 ✨ 主な特徴・より滑らかでリアルな動き動きの物理表現が向上し、フレーム間の動作が自然でスムーズになります。・複雑なシーンでも安定したパフォーマンス難易度の高いアクションや長時間の動きにも強く、より大胆な表現が可能になります。・シネマティックなカメラ制御の強化カメラワークがより意図的かつ操作しやすくなり、ダイナミックな映像演出が簡単に実現。・解釈力の向上と豊かな生成プロンプトへの忠実さに加え、創造的な補完力も強化。シンプルなアイデアからでも、より完成度の高いシーンを生成します。・映像全体の一貫性向上キャラクターやスタイル、背景要素の統一感が高まり、より洗練された仕上がりになります。 💡 ご注意 Preview版では一部未対応の内容があります。生成に問題がある場合は、プロンプトやリファレンス素材の調整をお試しください。今後さらに高度な機能や制作ツールも順次追加予定です。 👉 v4.0 Previewシリーズを今すぐ体験

PixAI

18,465 Aufrufe • vor 3 Monaten

『Spatialography』 3D空間再現技術における新たな表現とは何かを模索する展示ワールドが来たフォトグラメトリや3DGS等の立体空間を記録する技術がどんな新たな表現をもたらすのかを問いかけてくる展示そのものも凄いがそれ以上にこうした技術の可能性を感じずにはいられない #VRChat_world紹介

『Spatialography』 3D空間再現技術における新たな表現とは何かを模索する展示ワールドが来たフォトグラメトリや3DGS等の立体空間を記録する技術がどんな新たな表現をもたらすのかを問いかけてくる展示そのものも凄いがそれ以上にこうした技術の可能性を感じずにはいられない #VRChat_world紹介

探跡家もっけい

74,845 Aufrufe • vor 1 Jahr

非属人youtubeのリサーチ時間が大幅に短縮します.. ワイが使っているこちらのリサーチツールですが動画時間ごとの抽出も可能です！例えばスプレッドシートに時間(秒数）とハッシュタグを書き込めば、調べたいハッシュタグかつその秒数以上の動画を勝手に抽出してくれますこれならジャンルごとの・ショート動画(1分以内) ・10分以内でロング動画・10分以上のロング動画など動画時間ごとのリサーチが可能になります！このツールに興味のある人はこの投稿にいいねとリプ欄に「時間」と送ってください！今週、来週中には配布予定なので通知ONもお忘れなく！

非属人youtubeのリサーチ時間が大幅に短縮します.. ワイが使っているこちらのリサーチツールですが動画時間ごとの抽出も可能です！例えばスプレッドシートに時間(秒数）とハッシュタグを書き込めば、調べたいハッシュタグかつその秒数以上の動画を勝手に抽出してくれますこれならジャンルごとの・ショート動画(1分以内) ・10分以内でロング動画・10分以上のロング動画など動画時間ごとのリサーチが可能になります！このツールに興味のある人はこの投稿にいいねとリプ欄に「時間」と送ってください！今週、来週中には配布予定なので通知ONもお忘れなく！

ピカソ AI×YouTube運用

25,282 Aufrufe • vor 7 Monaten

🤖 ヒューマノイドが「視覚情報のみ」でドアを開ける！NVIDIAの最新成果 Doorman NVIDIA、CMUらによる共同研究「DoorMan」が、ヒューマノイドのロコ・マニピュレーション（歩行＋操作）における成果【ここが凄い！】 • 純粋なRGB画像のみ：外部センサーに頼らず、ロボット搭載のカメラ画像だけで多様なドアを識別し、開けて通り抜ける • 人間超えのスピード：タスク完了時間は、人間の遠隔操作よりも最大で31.7%（約7.15秒）高速 • 完全シミュレーション学習：人間のお手本データは一切使わず、100%シミュレータ（Isaac Lab）内での強化学習のみで実機（Unitree G1）への展開に成功【3段階の学習フェーズ】 1. Teacher学習：シミュレータ上の特権情報（ドアの正確な位置等）を使い、PPOで効率的に学習 2. 蒸留（Distillation）： Teacherの動きを、視覚情報しか使えないStudent（実機モデル）へ伝授 3. GRPOによる微調整：最後にGRPOを用いて、視覚入力特有の曖昧さを克服し、成功率を20〜30%向上【Stage-reset探索】ドア開けのような長い工程（近づく→触る→回す→通る）を効率化するため、シミュレータ内で途中のステージから強制的にリセットして開始する機能を導入。これにより、難易度の高い「ハンドルを回す」等の経験値を稼ぐことが可能に【シミュレーションの力】 Isaac Labの超高画質レンダリング（RTX）により、5,000種以上の照明条件や多様なテクスチャ、モーションブラーまでも再現。この圧倒的なデータ量と質の高い試行錯誤が、実世界での高い汎用性を生み出しているとのこと【コメント】まだコンタクトリッチ（接触の多いタスク）への展開は難しいようだが、ドアを開けるといった比較的単純なタスクであれば、ロコマニピュレーションがSimulationで解けるようになってきたのは非常に面白い #NVIDIA #AI #Robotics #Humanoid #Sim2Real #MachineLearning

🤖 ヒューマノイドが「視覚情報のみ」でドアを開ける！NVIDIAの最新成果 Doorman NVIDIA、CMUらによる共同研究「DoorMan」が、ヒューマノイドのロコ・マニピュレーション（歩行＋操作）における成果【ここが凄い！】 • 純粋なRGB画像のみ：外部センサーに頼らず、ロボット搭載のカメラ画像だけで多様なドアを識別し、開けて通り抜ける • 人間超えのスピード：タスク完了時間は、人間の遠隔操作よりも最大で31.7%（約7.15秒）高速 • 完全シミュレーション学習：人間のお手本データは一切使わず、100%シミュレータ（Isaac Lab）内での強化学習のみで実機（Unitree G1）への展開に成功【3段階の学習フェーズ】 1. Teacher学習：シミュレータ上の特権情報（ドアの正確な位置等）を使い、PPOで効率的に学習 2. 蒸留（Distillation）： Teacherの動きを、視覚情報しか使えないStudent（実機モデル）へ伝授 3. GRPOによる微調整：最後にGRPOを用いて、視覚入力特有の曖昧さを克服し、成功率を20〜30%向上【Stage-reset探索】ドア開けのような長い工程（近づく→触る→回す→通る）を効率化するため、シミュレータ内で途中のステージから強制的にリセットして開始する機能を導入。これにより、難易度の高い「ハンドルを回す」等の経験値を稼ぐことが可能に【シミュレーションの力】 Isaac Labの超高画質レンダリング（RTX）により、5,000種以上の照明条件や多様なテクスチャ、モーションブラーまでも再現。この圧倒的なデータ量と質の高い試行錯誤が、実世界での高い汎用性を生み出しているとのこと【コメント】まだコンタクトリッチ（接触の多いタスク）への展開は難しいようだが、ドアを開けるといった比較的単純なタスクであれば、ロコマニピュレーションがSimulationで解けるようになってきたのは非常に面白い #NVIDIA #AI #Robotics #Humanoid #Sim2Real #MachineLearning

村山龍太郎 | Muso Action 株式会社 CEO

14,403 Aufrufe • vor 7 Monaten

Higgsfieldが画像上に線を引くだけでカメラワークを指定できる新機能（Seedance 2.5）のデモを公開🎥✨ 🔹描いた軌跡通りにカメラが追従（モナリザの周囲を回る動き等） 🔹角度や速度を長文テキストで指示する手間が不要に 🔹Seedance 2.0/2.5の4K無制限キャンペーンも実施中情報元はリプ欄。

Higgsfieldが画像上に線を引くだけでカメラワークを指定できる新機能（Seedance 2.5）のデモを公開🎥✨ 🔹描いた軌跡通りにカメラが追従（モナリザの周囲を回る動き等） 🔹角度や速度を長文テキストで指示する手間が不要に 🔹Seedance 2.0/2.5の4K無制限キャンペーンも実施中情報元はリプ欄。

Sadao Tokuyama

441,807 Aufrufe • vor 11 Tagen

職質の動画なんですがこのやり取りも不毛で面白い警察股間に薬物などを隠す方がいるから股間を触ってもいいですか？のやり取りです。これは俺も嫌だなぁ

Sensitive content

職質の動画なんですがこのやり取りも不毛で面白い警察股間に薬物などを隠す方がいるから股間を触ってもいいですか？のやり取りです。これは俺も嫌だなぁ

がっちゃんです

86,087 Aufrufe • vor 3 Monaten

これはスヤスヤ寝ているカピバラを見ていたところ、周りに開いてる空間が沢山あるのになぜか他のカピバラが私と寝てるカピバラの間を通り過ぎた時の動画です。おはようございます。 #カピバラ

これはスヤスヤ寝ているカピバラを見ていたところ、周りに開いてる空間が沢山あるのになぜか他のカピバラが私と寝てるカピバラの間を通り過ぎた時の動画です。おはようございます。 #カピバラ

バラリ

256,944 Aufrufe • vor 1 Jahr

Insta360の空間キャプチャ(3DGS)、1分程度の動画からこれくらいきれいに生成できます何が良いって、仕組み的に動いているものを撮れないので、通行人や映り込みの顔を消す手間がなくて楽

Insta360の空間キャプチャ(3DGS)、1分程度の動画からこれくらいきれいに生成できます何が良いって、仕組み的に動いているものを撮れないので、通行人や映り込みの顔を消す手間がなくて楽

Ittousai

52,662 Aufrufe • vor 6 Tagen

選手の認知力を高めるためのトレーニングを行う際に、多くの指導者が【認知＝ただ首振り動作をすること】だと誤って理解してトレーニングの設計をしてしまいます。そもそも認知の定義とは情報収集を行い、得た情報の中から【分析】を行い適切な情報を【選択】し、プレーの【決断】を行うまでの一連の流れを指すと考えています。つまり首振り動作はファーストステップに過ぎません。また、動画のようなトレーニングに関しては小学生低学年においては”見る”といった習慣を持たせるといった意味では活用可能ですが、学年が上がるにつれて実際の試合における認知力を身につけさせたいのであれば、選手が見る対象はやはり実際の試合環境に近いもの、つまり味方や相手の設定・プレーの方向性・多方向からのボールの動きなど、彼らが試合において巡り合う情報のセッティングが重要となります。

選手の認知力を高めるためのトレーニングを行う際に、多くの指導者が【認知＝ただ首振り動作をすること】だと誤って理解してトレーニングの設計をしてしまいます。そもそも認知の定義とは情報収集を行い、得た情報の中から【分析】を行い適切な情報を【選択】し、プレーの【決断】を行うまでの一連の流れを指すと考えています。つまり首振り動作はファーストステップに過ぎません。また、動画のようなトレーニングに関しては小学生低学年においては”見る”といった習慣を持たせるといった意味では活用可能ですが、学年が上がるにつれて実際の試合における認知力を身につけさせたいのであれば、選手が見る対象はやはり実際の試合環境に近いもの、つまり味方や相手の設定・プレーの方向性・多方向からのボールの動きなど、彼らが試合において巡り合う情報のセッティングが重要となります。

Jun Takada / 高田純

15,860 Aufrufe • vor 16 Tagen

ComfyUI-SAM3DRenderなるカスタムノードを公開しました。一枚の絵を穴だらけの3D空間（ply）に変換し、任意の角度でレンダリングするカスタムノードです画像1枚目：入力画像動画：↑を3D空間にしたもの画像2枚目：レンダリング画面画像3枚目：入力画像+3D画像+補修済み

ComfyUI-SAM3DRenderなるカスタムノードを公開しました。一枚の絵を穴だらけの3D空間（ply）に変換し、任意の角度でレンダリングするカスタムノードです画像1枚目：入力画像動画：↑を3D空間にしたもの画像2枚目：レンダリング画面画像3枚目：入力画像+3D画像+補修済み

とりにく

32,526 Aufrufe • vor 3 Monaten

【遅報】ガイザー 30分だけ空き時間に配信を始めたが今回のことには加担してないと全否定現在LINEのスクショや色々と情報が出回っているが元々拉致されたことも知らなかったと話していた新たにミニラやイキリストの方に動画や音声などが渡されているようだが今後どういった対応をするのか

【遅報】ガイザー 30分だけ空き時間に配信を始めたが今回のことには加担してないと全否定現在LINEのスクショや色々と情報が出回っているが元々拉致されたことも知らなかったと話していた新たにミニラやイキリストの方に動画や音声などが渡されているようだが今後どういった対応をするのか

ふわっち特派員yz

45,071 Aufrufe • vor 6 Monaten