Loading video...

Video Failed to Load

There was a problem loading this video. This could be due to a temporary network issue or the video might be unavailable.

Meta QuestのPassthrough Camera APIが公開されたので、以前作った現実の物体を3Dで複製するアプリも更新してみた。ワールド座標スクリーン座標の計算とかがやりやすくなったので、指カメラの領域クロップを地味に実装したので3Dモデルの品質がちょっとだけ改善された。 Updated my "Echo the Reality" app using Passthrough Camera API !

Takahiro Poly Horikawa 堀川隆弘

4,618 subscribers

26,291 views • 1 year ago •via X (Twitter)

Education Science & Technology Arts

Anya Rossi• Live Now

Private livecam show

8 Comments

Takahiro Poly Horikawa 堀川隆弘1 year ago

アプリは SideQuest で試験的に公開してます。何も説明とか出ないけど、ボディトラッキングをONにして、指カメラ作れば動くはずです。

Takahiro Poly Horikawa 堀川隆弘1 year ago

Thanks @xrdevrob for sharing this API.

RedDeer.Games1 year ago

🚨 TOP HIT on Nintendo! 🚨 🎉 My Cozy Room is now a Top 10 best-seller worldwide! 🛋️ Design your dream space with 500+ items & 30+ styles. 👉 Play now: Don’t miss out—start creating today! 🔥 #Nintendo #Top10 #RedDeerGames #MyCozyRoom #NintendoSwitch

K1 year ago

This is very cool but its not working most of the time. its just the loading thing

Takahiro Poly Horikawa 堀川隆弘1 year ago

Thank you for your feedback. This is likely caused by the camera failing to detect the subject in the photo. Please try taking a pic with a clear and easily recognizable subject, making sure it fills as much of the frame as possible. I'll work on improving the error messages.

Saurabh Chalke ᯅ1 year ago

This is sick! Do you see performance improvements over the previous approach?

Takahiro Poly Horikawa 堀川隆弘1 year ago

Yes! When using the Media Projection API, I occasionally felt that the frame rate dropped, but after switching to the Passthrough Camera API, it feels stable.

kimberly1 year ago

姉ちゃんがハマってる投資アドバイザー @capricornio641 独特な視点とわかりやすい解説が勉強になるとか。姉ちゃん曰く、来春に家族で海外旅行の予定らしい。羨ましい〜！ 💎 👍 🌺 💐 🔥 🌹 💼

Related Videos

Meta Quest 3 の Passthrough Camera API を使って、Immersal での位置合わせができた！

Meta Quest 3 の Passthrough Camera API を使って、Immersal での位置合わせができた！

たるこす / Yusuke Furuta

17,899 views • 1 year ago

クリスタEXの四面図パレットで表示したカメラをクリックすると、カメラの目線をコントロールできる○が表示されますクリスタ3Dのカメラを狙った位置に向けさせるのが難しいなと思ったら四面図パレットのカメラそのものを移動したり、目線コントロールの○をドラッグしてみてちょっとコツがつかみやすくなるかも

クリスタEXの四面図パレットで表示したカメラをクリックすると、カメラの目線をコントロールできる○が表示されますクリスタ3Dのカメラを狙った位置に向けさせるのが難しいなと思ったら四面図パレットのカメラそのものを移動したり、目線コントロールの○をドラッグしてみてちょっとコツがつかみやすくなるかも

へいたろう/平井太朗

113,243 views • 2 months ago

ジャスピオンはそれまでのヒーローもので普通だった大見得切った変身ポーズや名乗りをなくしてドラマの流れを途切れさせなかったのが新しいと思ったのよ。あと何と言ってもダイレオン！それまでの着ぐるみロボの常識を覆したアクション！メタルヒーローの新境地を開いた作品だと思うのです。

ジャスピオンはそれまでのヒーローもので普通だった大見得切った変身ポーズや名乗りをなくしてドラマの流れを途切れさせなかったのが新しいと思ったのよ。あと何と言ってもダイレオン！それまでの着ぐるみロボの常識を覆したアクション！メタルヒーローの新境地を開いた作品だと思うのです。

ノリ

116,881 views • 13 days ago

GPT5.5でインタラクティブな物理シミュレーションの実験。こんな柔軟に物理現象で遊べる環境が1,2分で実装できてしまう。「ちゃんと計算してるの？」みたいな声もあったので検証コードもつけてみた。反響があれば何かしらで公開するかもです。（AIの性能チェックのためのただの遊びですが...）

GPT5.5でインタラクティブな物理シミュレーションの実験。こんな柔軟に物理現象で遊べる環境が1,2分で実装できてしまう。「ちゃんと計算してるの？」みたいな声もあったので検証コードもつけてみた。反響があれば何かしらで公開するかもです。（AIの性能チェックのためのただの遊びですが...）

大嶋泰介/TaisukeOhshima

30,109 views • 2 months ago

Viduのリファレンスにも「Q2」が実装されたとのことで、CBTに参加させていただきました😁 モデルがQ2になったおかげで、カメラ表現の幅が大きく広がり、プロンプト通りにしっかり動いてくれるようになりました！特にダンスモーションとの相性がとても良いと感じています。正直これまでリファレンスはカメラ制御が難しくて敬遠していたのですが、今回のアップデートで実用的に使えるものになったと感じました。 #Vidu #ViduQ2

Viduのリファレンスにも「Q2」が実装されたとのことで、CBTに参加させていただきました😁 モデルがQ2になったおかげで、カメラ表現の幅が大きく広がり、プロンプト通りにしっかり動いてくれるようになりました！特にダンスモーションとの相性がとても良いと感じています。正直これまでリファレンスはカメラ制御が難しくて敬遠していたのですが、今回のアップデートで実用的に使えるものになったと感じました。 #Vidu #ViduQ2

錆たまご

50,381 views • 8 months ago

びっくりマーク ♪ けんあゆさんのものをやっって頂いたのでこれもちょっとやりやすいかな。ただフルコーラスでないのが残念なんだが。

びっくりマーク ♪ けんあゆさんのものをやっって頂いたのでこれもちょっとやりやすいかな。ただフルコーラスでないのが残念なんだが。

CARAMEL

17,212 views • 2 years ago

足の裏って、体の歪みとも直結してる。実は私の左足、前のアーチが潰れ気味なんです。原因は…小学生のとき。小指をタイヤにすれすれで轢かれて、ただの捻挫？突き指？くらいで放置してしまった。そのあといつの間にか「小指を使わない歩き方」になっていたみたいで…結果、アーチが崩れてしまったんです。足の裏には体の全体重が乗っかってる。だから足裏のアーチは、体の歪みの原因にもなる大事な場所。失ったアーチを取り戻すためにできること、今日の動画で一緒にやってみて🫶 ↓↓

足の裏って、体の歪みとも直結してる。実は私の左足、前のアーチが潰れ気味なんです。原因は…小学生のとき。小指をタイヤにすれすれで轢かれて、ただの捻挫？突き指？くらいで放置してしまった。そのあといつの間にか「小指を使わない歩き方」になっていたみたいで…結果、アーチが崩れてしまったんです。足の裏には体の全体重が乗っかってる。だから足裏のアーチは、体の歪みの原因にもなる大事な場所。失ったアーチを取り戻すためにできること、今日の動画で一緒にやってみて🫶 ↓↓

くりとも｜ヨガを教えないヨガインストラクター

69,772 views • 9 months ago

3日前にガザとの中継イベントを行ったのですが、話しながら私も胸にくるものがありました。「私たちのことをもっと知ってもらえば、きっと考えを変えてくれると信じています」「寄付でなくても現状を知ろうとしてくれるだけでもありがたいのです」遠く離れた日本にいる私たちをして、今やるべきことをやるのだと改めて。深く。

3日前にガザとの中継イベントを行ったのですが、話しながら私も胸にくるものがありました。「私たちのことをもっと知ってもらえば、きっと考えを変えてくれると信じています」「寄付でなくても現状を知ろうとしてくれるだけでもありがたいのです」遠く離れた日本にいる私たちをして、今やるべきことをやるのだと改めて。深く。

永井陽右 | アクセプト・インターナショナル

16,290 views • 5 months ago

Quest3のカメラパススルーAPIと動画生成AIで現実を3D猫広告に変化させるアプリができた Tried turning reality into a 3D cat advertisement using the Quest 3 Camera Passthrough API and a video-generation AI

Quest3のカメラパススルーAPIと動画生成AIで現実を3D猫広告に変化させるアプリができた Tried turning reality into a 3D cat advertisement using the Quest 3 Camera Passthrough API and a video-generation AI

Takahiro Poly Horikawa 堀川隆弘

52,110 views • 1 year ago

Apple Vision Proの「AirDraw」に物理演算モードが追加されましたが、これが驚くほど画期的な体験になっています。これまでは空間に絵を描くだけでしたが、物理特性をオンにすることで、描いた3Dオブジェクトを触ったり動かしたりできるようになりました。自分の手や周囲の環境に対して描いたものが反応するため、ただのデータではなく、まるでそこに実在する「物体」が自分の部屋に置かれているような、圧倒的なリアリティを感じることができます。

Apple Vision Proの「AirDraw」に物理演算モードが追加されましたが、これが驚くほど画期的な体験になっています。これまでは空間に絵を描くだけでしたが、物理特性をオンにすることで、描いた3Dオブジェクトを触ったり動かしたりできるようになりました。自分の手や周囲の環境に対して描いたものが反応するため、ただのデータではなく、まるでそこに実在する「物体」が自分の部屋に置かれているような、圧倒的なリアリティを感じることができます。

チタロ

296,051 views • 5 months ago

新作ワールド『羽眼神社 - Hamanako Shrine』を公開しました。雪の降る神社です。 @TAKANISOさんの依頼で作ったイベント用ワールドだったのですが、単発のイベントだけで使うにはもったいないくらいクオリティが高くなったので、一般公開バージョンも作りました。

新作ワールド『羽眼神社 - Hamanako Shrine』を公開しました。雪の降る神社です。 @TAKANISOさんの依頼で作ったイベント用ワールドだったのですが、単発のイベントだけで使うにはもったいないくらいクオリティが高くなったので、一般公開バージョンも作りました。

浜名湖なこ🦊チャイナ女装おキツネおにーさんVTuber

33,523 views • 6 months ago

前から撮りたいと思ってたけどなかなか撮れなかった猫の仕草が撮れたのですが、このちゃしろの後ろ足で人間をコスコスする動作、構ってほしい時やおけつポンポンして欲しい時などによくやります。ちゃしろ以外では今は亡き初代キジシロがやってたのですが、他にやる猫ちゃんいらっしゃるのでしょうか？

前から撮りたいと思ってたけどなかなか撮れなかった猫の仕草が撮れたのですが、このちゃしろの後ろ足で人間をコスコスする動作、構ってほしい時やおけつポンポンして欲しい時などによくやります。ちゃしろ以外では今は亡き初代キジシロがやってたのですが、他にやる猫ちゃんいらっしゃるのでしょうか？

コンドリア水戸

573,590 views • 8 months ago

「キミが作ってるのって一体どういうゲームなの？」という質問をよくいただきます。ちょっぴり強い女の子の頭をなでなでしたりぽんぽんするゲームです。そういえば、リザルト画面が実装されたりしました。

「キミが作ってるのって一体どういうゲームなの？」という質問をよくいただきます。ちょっぴり強い女の子の頭をなでなでしたりぽんぽんするゲームです。そういえば、リザルト画面が実装されたりしました。

ごーまにー@個人でゲームつくる

23,413 views • 2 months ago

Claude 4 Opus使ったら、一撃でブラウザエージェント作れるぜ！！と、海外のインフルエンサーが言っていたので、せっかく調査のためにMAXを契約していたので、半信半疑でやってみたけど、確かにレベル違う。バックエンドとフロントをしっかりと実装、つなぎ込みをしている。全体で、２０００ステップ以上を数分で。この機能が１時間弱でエラーなし。＜機能＞・ブラウザの遠隔操作・表示されているページの要約・表示されているページのスナップショット取得（API Call）・表示されているページの翻訳説明（API Call）僕が指示したのは、「動作するブラウザエージェント (API とフロントエンド)を作成して」とだけ。そのあと、「あー、英語のページは翻訳したい」「要約したい」「OpenAIとか、AnthropicのAPI使っていいよ」「デザインダサいわ」しか言ってない。そこから、２～３エラーが出たけど、賞味１時間でこれ。現状だとチープな機能だけど、このレベルのソース量になると、大体フロント⇔バックエンドがつながらなかったり漏れだらけが大半だったのが、これはかなり感動もの。これは確かに、「別の作業しながら、何かのシステムを作ってもらう」が本当にでき始めていて、大きな進展を感じ１年。早すぎる。

Claude 4 Opus使ったら、一撃でブラウザエージェント作れるぜ！！と、海外のインフルエンサーが言っていたので、せっかく調査のためにMAXを契約していたので、半信半疑でやってみたけど、確かにレベル違う。バックエンドとフロントをしっかりと実装、つなぎ込みをしている。全体で、２０００ステップ以上を数分で。この機能が１時間弱でエラーなし。＜機能＞・ブラウザの遠隔操作・表示されているページの要約・表示されているページのスナップショット取得（API Call）・表示されているページの翻訳説明（API Call）僕が指示したのは、「動作するブラウザエージェント (API とフロントエンド)を作成して」とだけ。そのあと、「あー、英語のページは翻訳したい」「要約したい」「OpenAIとか、AnthropicのAPI使っていいよ」「デザインダサいわ」しか言ってない。そこから、２～３エラーが出たけど、賞味１時間でこれ。現状だとチープな機能だけど、このレベルのソース量になると、大体フロント⇔バックエンドがつながらなかったり漏れだらけが大半だったのが、これはかなり感動もの。これは確かに、「別の作業しながら、何かのシステムを作ってもらう」が本当にでき始めていて、大きな進展を感じ１年。早すぎる。

Hodachi | LLM & AI Engineer

48,010 views • 1 year ago

これはすごい！XREAL ONEに、1g台でカメラが着くって！！で、公式でも発表されてなかったのですが、モバイルバッテリーでもカメラ動作しました！アクションカムみたいにしても使える！なので、前代未聞の主観と自撮りの両方のビデオ撮ってみましたｗ 60fpsなのもすごい！！ #XREAL #PR

これはすごい！XREAL ONEに、1g台でカメラが着くって！！で、公式でも発表されてなかったのですが、モバイルバッテリーでもカメラ動作しました！アクションカムみたいにしても使える！なので、前代未聞の主観と自撮りの両方のビデオ撮ってみましたｗ 60fpsなのもすごい！！ #XREAL #PR

よっぴー/吉田尚記

26,290 views • 1 year ago

「仕事がなくなる」よりも深いのは「意味がなくなる」恐れだ。産業化は生産を工業化しただけでなく、アイデンティティまで工業化した。「何をしているの？」が「あなたは誰？」になった世界で、AIがタスクを肩代わりし始めれば、次に崩れるのは自己像そのものかもしれない。アクラム・アワド「AIは私たちを無用にしてしまうのでしょうか？もし働かないなら、私たちは誰なのでしょうか？もし生み出さないなら、私はまだ意味があるのでしょうか？何世紀にもわたって、私たちは自分のアイデンティティや価値を『何をしているか』に結びつけてきました。農家、工場労働者、コーダー、コンサルタント——仕事と職は、現代の社会における秩序と定義の原理になりました。ですが、いつもそうだったわけではありません。産業革命の前は、私たちのアイデンティティは信仰や家族や共同体から来ていました。仕事は人生の一部でしたが、それ自体が人生の定義ではありませんでした。そこに工業化がやって来て、私たちは生産だけでなく、アイデンティティまでも工業化しました。『何をしているの？』は『あなたは誰？』の言い換えになったのです。そして今日のAIは、そのモデルを完全に解体しつつあります。AIはあらゆるタスクを自動化しています。製造や物流、デザイン、顧客対応、さらには創造的な仕事にまで。いまのAIは曲を作り、コードを設計し、本を挿絵化し、そしてそれ以上のこともできます。実際、世界経済フォーラムは、2025年までにAIが人間より多くのタスクを行い、何億という雇用が危険にさらされると予測しています。ですが、これは仕事だけの話ではありません。意味の話です。尊厳の話です。かつて私たちに価値を与えていたただ一つのものが、時代遅れになったときに何が起きるのか、という話です。そして注意しなければ、私たちは大恐慌に向かうかもしれません。ですが今回は、所得の大恐慌ではなく、アイデンティティの大恐慌です」

「仕事がなくなる」よりも深いのは「意味がなくなる」恐れだ。産業化は生産を工業化しただけでなく、アイデンティティまで工業化した。「何をしているの？」が「あなたは誰？」になった世界で、AIがタスクを肩代わりし始めれば、次に崩れるのは自己像そのものかもしれない。アクラム・アワド「AIは私たちを無用にしてしまうのでしょうか？もし働かないなら、私たちは誰なのでしょうか？もし生み出さないなら、私はまだ意味があるのでしょうか？何世紀にもわたって、私たちは自分のアイデンティティや価値を『何をしているか』に結びつけてきました。農家、工場労働者、コーダー、コンサルタント——仕事と職は、現代の社会における秩序と定義の原理になりました。ですが、いつもそうだったわけではありません。産業革命の前は、私たちのアイデンティティは信仰や家族や共同体から来ていました。仕事は人生の一部でしたが、それ自体が人生の定義ではありませんでした。そこに工業化がやって来て、私たちは生産だけでなく、アイデンティティまでも工業化しました。『何をしているの？』は『あなたは誰？』の言い換えになったのです。そして今日のAIは、そのモデルを完全に解体しつつあります。AIはあらゆるタスクを自動化しています。製造や物流、デザイン、顧客対応、さらには創造的な仕事にまで。いまのAIは曲を作り、コードを設計し、本を挿絵化し、そしてそれ以上のこともできます。実際、世界経済フォーラムは、2025年までにAIが人間より多くのタスクを行い、何億という雇用が危険にさらされると予測しています。ですが、これは仕事だけの話ではありません。意味の話です。尊厳の話です。かつて私たちに価値を与えていたただ一つのものが、時代遅れになったときに何が起きるのか、という話です。そして注意しなければ、私たちは大恐慌に向かうかもしれません。ですが今回は、所得の大恐慌ではなく、アイデンティティの大恐慌です」

Tsubame

93,869 views • 6 months ago

Warudoを使って流行りの？Live2Dみたいに動く3Dモデルの設定実装してみました。キーバインドでアニメーションの切り替えもサクサクです！ VRM標準のMToonだとこんな感じになります。

Warudoを使って流行りの？Live2Dみたいに動く3Dモデルの設定実装してみました。キーバインドでアニメーションの切り替えもサクサクです！ VRM標準のMToonだとこんな感じになります。

🐇306🫧

15,446 views • 1 year ago