Generative Models for 3D Shape Fire Plume Estimation

Wildfires can have a big impact on our environment and nature. That is why it would be interesting to meet their behaviour. Our project is willing to create a 3D reconstruction of fire smoke plumes using a small number of images. It is done using camera parametrization to know the position, shape and scale of the object creating a Shape from Silhouette (SfS). The entry will be two images of the smoke taken at 90 degrees between them and facing the same point. The output is going to be used to initialize a convolutional neural network that will transform the object into a density and smoothen the borders. It has been observed that using a SfS as an initialization of the CNN gives better results than doing it through the CNN own initialization.
Los incendios forestales pueden tener un gran impacto en nuestro entorno y la naturaleza. Es por eso por lo que es interesante conocer su comportamiento. Nuestro proyecto quiere generar una reconstrucción 3D de los penachos del humo del fuego a partir de un número reducido de imágenes. Lo hacemos utilizando parametrización de cámaras para conocer la posición, forma y escala del objeto generando un Shape from Shilouette (SfS). La entrada serán dos fotos del humo tomadas a 90 grados la una de la otra mirando al mismo punto. La salida del SfS servirá para inicializar una red neuronal que convertirá el objeto en una densidad y suavizará los bordes. Se ha podido observar que usar un SfS como inicialización de la red neuronal da mejores los resultados que haciéndolo con la propia inicialización de la red neuronal.
Els incendis forestals poden tenir un gran impacte en el nostre entorn i a la natura. És per això que és interessant conèixer el seu comportament. El nostre projecte pretén fer una reconstrucció en 3D dels plomalls del fum del foc a partir d’un nombre reduït d’imatges. Això ho farem utilitzant parametrització de càmeres per conèixer la posició, forma i escala de l’objecte generant un Shape from Silhouette (SfS). L’entrada seran dues fotografies del fum fetes a 90 graus una de l’altra ambdues mirant al mateix punt. La sortida del SfS servirà per inicialitzar una Xarxa Neuronal que convertirà l’objecte en una densitat i en suavitzarà les vores perquè s’assembli més a fum. S’ha observat que utilitzar un SfS com a inicialització de la Xarxa Neuronal dona millors resultats que fer-ho amb la pròpia inicialització de la Xarxa Neuronal.