Rede Neural usa Fotos da Internet para criar projeções 3D

Pesquisadores mostraram como uma rede neural usa fotos da Internet para criar projeções em 3D que se movem.

Chamada de NeRF-W, que se refere a “Neural Radiance Fields”, o sistema usa a tecnologia para reconstruir, por exemplo, grandes obras com fotos de coleções disponíveis pela web.

Os pesquisadores dizem:

A NeRF-W captura iluminação e pós-processamento fotométrico em um espaço de incorporação latente de baixa dimensão. A interpolação entre dois embeddings captura suavemente a variação na aparência sem afetar a geometria 3D.

Explicando melhor, a tecnologia captura as variações de visuais de cada imagem e insere uma na outra, sem afetar a forma do objeto em questão. Isso resulta em uma representação bastante certeira da imagem real, recriada em 3D.

No vídeo abaixo, você confere alguns exemplos de renderizações em 3D criadas usando a rede neural, que nos dá uma ideia bem interessante do que ela pode fazer.

Como a rede neural usa fotos da Internet para criar projeções em 3D