Investigadores de NTU lanzan Puffin-World con estados 3D anclados a la cámara
Según la ficha del modelo de Hugging Face, el modelo liderado por NTU genera vistas RGB y de profundidad controladas por la cámara que pueden consolidarse en nubes de puntos 3D.
By RuntimeWire Staff · Published
Primary source: Hugging Face Newsroom
Por qué importa
Puffin-World convierte la pose de la cámara y la profundidad en estados de modelo de primera clase, una dirección útil para robots y agentes que necesitan entornos 3D estables en lugar de solo video convincente.
Kang Liao y otros nueve investigadores detallaron el proyecto Puffin-World el 2 de septiembre, dando a los modelos multimodales representaciones explícitas de la gravedad, la orientación de la cámara y la profundidad de la escena en lugar de pedirle a los píxeles generados que lleven toda la información espacial.…
When you purchase through links in our articles, we may earn a small commission. This doesn’t affect our editorial independence.