TakeMeHome3D

Abstract

[ES]En este proyecto se realiza el diseño e implementación de un sistema para la captura de vídeo o imágenes para el entrenamiento de un modelo de inteligencia artificial utilizando la cámara de un dispositivo móvil. Las imágenes capturadas se procesarán mediante técnicas NeRF(Neural Radiance Fields) para la creación de un modelo 3D que se utilizará para poder visualizar aquello que se haya capturado en el mundo real mediante Realidad Aumentada. Las técnicas NeRF pueden ser utilizadas para la generación de imágenes de una escena no antes vistas, es decir, dadas varias imágenes de un objeto desde ciertos ángulos, el modelo es capaz de generar nuevas imágenes de ese mismo objeto desde perspectivas no antes vistas. Esto, a su vez, puede ser utilizado para la creación de una representación 3D del objeto o de la escena analizados. El objetivo es poder, de una forma sencilla, obtener un objeto 3D para su visualización en diferentes entornos. Por ejemplo, capturar una silla para después poder visualizarla en el entorno de nuestro hogar antes de proceder a su compra.

[EN]This project designs and implements a system for capturing video or images for training an artificial intelligence model using a cell phone camera. The captured images will be processed using NeRF (Neural Radiance Fields) techniques for the creation of a 3D model that will be used to visualize what has been captured in the real world through Augmented Reality. NeRF techniques can be used to generate images of a scene not seen before, in other words, given several images of an object from certain angles, the model is able to generate new images of the same object from perspectives not seen before. This, in turn, can be used for the creation of a 3D representation of the analyzed object or scene. The goal is to be able to, in a simple way, obtain a 3D object for visualization in different environments. For example, capturing a chair and then being able to visualize it in our home environment before proceeding to purchase it.