GlassFood: The holographic healthy smart recipe app

This project integrates mixed reality, computer vision, and deep learning to develop an application for the Glassear headset, a cutting-edge entrepreneurial project. The aim of the application is to improve user health and encourage a culture of healthy eating. Mixed reality combines virtual and augmented reality, bridging the gap between the real and digital world, to offer an immersive and interactive experience to the user. By using the headset's cameras to scan the environment, the application identifies available ingredients and presents healthy recipes with instructions in 3D and first-person view. The computer vision component of the project provides real-time object detection with high precision and recall, over 95%, and the advanced user interface allows for seamless interaction with the experience, by using natural input such as human hands or eyes. The combination of these technologies results in a dynamic and intuitive experience for the user, promoting healthy eating habits and giving more value to new technologies. Aquest projecte integra realitat mixta, visió per ordinador i aprenentatge profund per desenvolupar una aplicació per al casc Glassear, un projecte emprenedor d'avantguarda. L'objectiu de l'aplicació és millorar la salut dels usuaris i fomentar una cultura d'alimentació saludable. La realitat mixta combina la realitat virtual i la realitat augmentada, superant la bretxa entre el món real i el digital, per oferir una experiència immersiva i interactiva a l'usuari. Mitjançant l'ús de les càmeres del casc per escanejar l'entorn, l'aplicació o identifica els ingredients disponibles i presenta receptes saludables amb instruccions en 3D i vista en primera persona. El component de visió per ordinador del projecte proporciona detecció d'objectes en temps real amb una alta precisió i record, més del 95%, i la interfície d'usuari avançda permet una interacció perfecta amb l'experiència, utilitzant inputs naturals com ara mans o ulls humans, fins i tot la veu. La combinació o d'aquestes tecnologies dóna com a resultat una experiència dinàmica i intuïtiva per a l'usuari, promovent habits alimentaris saludables i donant més valor a noves tecnologies. Este proyecto integra realidad mixta, visión por ordenador y aprendizaje profundo para desarrollar una aplicación para el casco Glassear, un proyecto emprendedor de vanguardia. El objetivo de la aplicación es mejorar la salud de los usuarios y fomentar una cultura de alimentación saludable. La realidad mixta combina la realidad virtual y la realidad aumentada, superando la brecha entre el mundo real y el digital, para ofrecer una experiencia inmersiva e interactiva al usuario. Mediante el uso de las cámaras del casco para escanear el entorno, la aplicación o identifica los ingredientes disponibles y presenta recetas saludables con instrucciones en 3D y vista en primera persona. El componente de visión por ordenador del proyecto proporciona detección de objetos en tiempo real con una alta precisión y recuerdo, más del 95%, y la interfaz de usuario avanzada permite una interacción perfecta con la experiencia, utilizando inputs naturales como manos u ojos humanos, incluso la voz. La combinación o de estas tecnologías da como resultado una experiencia dinámica e intuitiva para el usuario, promoviendo habitos alimentarios saludables y dando más valor a nuevas tecnologías.