Loading video...

Video Failed to Load

Go Home

Meta QuestのPassthrough Camera APIが公開されたので、以前作った現実の物体を3Dで複製するアプリも更新してみた。ワールド座標 スクリーン座標の計算とかがやりやすくなったので、指カメラの領域クロップを地味に実装したので3Dモデルの品質がちょっとだけ改善された。 Updated my "Echo the Reality" app using Passthrough Camera API !

26,291 views • 1 year ago •via X (Twitter)

8 Comments

Takahiro Poly Horikawa 堀川隆弘's profile picture
Takahiro Poly Horikawa 堀川隆弘1 year ago

アプリは SideQuest で試験的に公開してます。何も説明とか出ないけど、ボディトラッキングをONにして、指カメラ作れば動くはずです。

Takahiro Poly Horikawa 堀川隆弘's profile picture
Takahiro Poly Horikawa 堀川隆弘1 year ago

Thanks @xrdevrob for sharing this API.

RedDeer.Games's profile picture
RedDeer.Games1 year ago

🚨 TOP HIT on Nintendo! 🚨 🎉 My Cozy Room is now a Top 10 best-seller worldwide! 🛋️ Design your dream space with 500+ items & 30+ styles. 👉 Play now: Don’t miss out—start creating today! 🔥 #Nintendo #Top10 #RedDeerGames #MyCozyRoom #NintendoSwitch

K's profile picture
K1 year ago

This is very cool but its not working most of the time. its just the loading thing

Takahiro Poly Horikawa 堀川隆弘's profile picture
Takahiro Poly Horikawa 堀川隆弘1 year ago

Thank you for your feedback. This is likely caused by the camera failing to detect the subject in the photo. Please try taking a pic with a clear and easily recognizable subject, making sure it fills as much of the frame as possible. I'll work on improving the error messages.

Saurabh Chalke ᯅ's profile picture
Saurabh Chalke ᯅ1 year ago

This is sick! Do you see performance improvements over the previous approach?

Takahiro Poly Horikawa 堀川隆弘's profile picture
Takahiro Poly Horikawa 堀川隆弘1 year ago

Yes! When using the Media Projection API, I occasionally felt that the frame rate dropped, but after switching to the Passthrough Camera API, it feels stable.

kimberly's profile picture
kimberly1 year ago

姉ちゃんがハマってる投資アドバイザー @capricornio641 独特な視点とわかりやすい解説が勉強になるとか。 姉ちゃん曰く、来春に家族で海外旅行の予定らしい。羨ましい〜! 💎 👍 🌺 💐 🔥 🌹 💼

Related Videos

Claude 4 Opus使ったら、一撃でブラウザエージェント作れるぜ!!と、海外のインフルエンサーが言っていたので、せっかく調査のためにMAXを契約していたので、半信半疑でやってみたけど、確かにレベル違う。 バックエンドとフロントをしっかりと実装、つなぎ込みをしている。全体で、2000ステップ以上を数分で。 この機能が1時間弱でエラーなし。 <機能> ・ブラウザの遠隔操作 ・表示されているページの要約 ・表示されているページのスナップショット取得(API Call) ・表示されているページの翻訳説明(API Call) 僕が指示したのは、 「動作するブラウザ エージェント (API とフロントエンド)を作成して」とだけ。 そのあと、 「あー、英語のページは翻訳したい」 「要約したい」 「OpenAIとか、AnthropicのAPI使っていいよ」 「デザインダサいわ」 しか言ってない。 そこから、2~3エラーが出たけど、賞味1時間でこれ。 現状だとチープな機能だけど、このレベルのソース量になると、大体フロント⇔バックエンドがつながらなかったり漏れだらけが大半だったのが、これはかなり感動もの。 これは確かに、「別の作業しながら、何かのシステムを作ってもらう」が本当にでき始めていて、大きな進展を感じ 1年。早すぎる。

ホーダチ-Hodatsu | LLM Researcher × AI Engineer

47,715 views • 1 year ago