Загрузка видео...

Не удалось загрузить видео

На главную

🚀 Just created something completely new! I Rewrote Apple's Sharp to generate 3D Gaussian Splats from a single 360° equirectangular image made from FLUX 2 (Flex) One equirectangular image → Full spherical 3DGS world! ✨ New web interface - drag & drop your pano, select quality, download PLY ⚡...

74,512 просмотров • 10 месяцев назад •via X (Twitter)

Комментарии: 36

Фото профиля Sacha Sayan
Sacha Sayan10 месяцев назад

Generate SHARP splat -> shift perspective by (x,y,z) offset -> render new equirectangular image from result -> infill missing detail with FLUX -> generate new SHARP splat -> merge into existing scene with known (x,y,z) offset -> rinse, repeat

Фото профиля JQ
JQ10 месяцев назад

Any chance of a technical write up or blog post? I’ve been doing research into this very approach. But not for VR, more for a home version of an ILM volume type setup, think projectors.

Фото профиля Daniel Skaale
Daniel Skaale10 месяцев назад

yes will do:-)

Фото профиля Palash Bansal
Palash Bansal10 месяцев назад

How is it different from extruding the depth map? Why do you need gsplats in this case?

Фото профиля Daniel Skaale
Daniel Skaale10 месяцев назад

Hi I dont use gsplats have a nice weekend :-)

Фото профиля HAN YOLO 🍌
HAN YOLO 🍌10 месяцев назад

Damn, Daniel

Фото профиля Daniel Skaale
Daniel Skaale10 месяцев назад

Thanks Han! , much appreciated have a nice weekend 😃

Фото профиля Martin Nebelong
Martin Nebelong10 месяцев назад

Great stuff Daniel! Anywhere we can test this?

Фото профиля Daniel Skaale
Daniel Skaale10 месяцев назад

Thanks Martin😍right now it just runs locally on my laptop but will find a provider and upload it soon it runs really smooth and fast but need to tweek it bit more have a nice sunday I thanks for sharing my work!

Фото профиля Fedox💫
Fedox💫10 месяцев назад

@MartinNebelong cant wait!! good work!

Фото профиля Daniel Skaale
Daniel Skaale10 месяцев назад

@MartinNebelong Thanks Fedox🤓

Фото профиля Leo Mozoloa
Leo Mozoloa10 месяцев назад

do you feed the whole image to sharp or chunks of it ?

Фото профиля Daniel Skaale
Daniel Skaale10 месяцев назад

Hello Leo, Yes the whole image :-)

Фото профиля Mattias Johansson
Mattias Johansson10 месяцев назад

Wow amazing. It’s still limited by Apples license I guess?

Фото профиля Marouane Duboc
Marouane Duboc10 месяцев назад

Amazing, good job!

Фото профиля sora
sora10 месяцев назад

can't wait for you to host this

Фото профиля Mage
Mage10 месяцев назад

How can I try it?

Фото профиля Daniel Skaale
Daniel Skaale10 месяцев назад

will find a provider to upload soon

Фото профиля tipatat
tipatat10 месяцев назад

Incredible work! Can't wait to try it

Фото профиля Agneya
Agneya10 месяцев назад

@ReflctWillie Artistic !

Фото профиля Trond Wuellner
Trond Wuellner10 месяцев назад

Whoa!! So cool

Фото профиля Skylar Kitchen
Skylar Kitchen10 месяцев назад

This is awesome!

Фото профиля Heba AI
Heba AI10 месяцев назад

How did you do it as the model is trained with 1530x1530 size?

Фото профиля Mojtaba Tabatabaie
Mojtaba Tabatabaie10 месяцев назад

Awesome work! 👏

Фото профиля Heba AI
Heba AI10 месяцев назад

Why not share the code?

Фото профиля mrzero
mrzero10 месяцев назад

nice work. I think you can convert pano photo to cubeface first. ML-Sharp was trained on perspective photo.

Фото профиля XWAVΞ
XWAVΞ10 месяцев назад

what depth model are you using?

Фото профиля Salty
Salty10 месяцев назад

Incredible work

Фото профиля seantai
seantai10 месяцев назад

how accurate might this be for architecture stuff? when can we test this?

Фото профиля Dee Yonh
Dee Yonh7 месяцев назад

this project also implemented a pano 360 recon via sharp

Фото профиля Jn
Jn10 месяцев назад

looking forward the online demo

Фото профиля uzima
uzima10 месяцев назад

Does Flux 2 generate the 360 photos?

Фото профиля LionHeadLionHeart ᯅ
LionHeadLionHeart ᯅ10 месяцев назад

What was the process and methods you you applied to produce this? Looks great!

Фото профиля Dick Applehead
Dick Applehead10 месяцев назад

looks like shit. congrats

Фото профиля Massimo 🫧
Massimo 🫧10 месяцев назад

Hey Daniel. Is this out yet? Would love to try this

Фото профиля Pablo Gil
Pablo Gil10 месяцев назад

Awesome! Could you share your fork so that we can also try it out locally?

Похожие видео