Blog

Jun 01, 2023

L'IA aide en réel

"Auparavant, les gens pensaient qu'avec le matériel grand public existant, il était impossible d'effectuer des calculs d'holographie 3D en temps réel", a déclaré l'auteur principal Liang Shi, titulaire d'un doctorat. étudiant au département de

"Auparavant, les gens pensaient qu'avec le matériel grand public existant, il était impossible d'effectuer des calculs d'holographie 3D en temps réel", a déclaré l'auteur principal Liang Shi, titulaire d'un doctorat. étudiant au Département de génie électrique et d'informatique du MIT. "On dit souvent que les écrans holographiques disponibles dans le commerce seront disponibles dans 10 ans, mais cette affirmation existe depuis des décennies." Shi pense que la nouvelle approche, "l'holographie tensorielle", mettra l'objectif à portée de main. En fin de compte, la différence entre une photographie et un hologramme résident dans le codage par l'hologramme de la luminosité et de la phase de chaque onde lumineuse. Cela permet à un hologramme de donner une représentation plus réaliste de la parallaxe et de la profondeur d'une scène. Pour capturer optiquement un hologramme, un faisceau laser est divisé, la moitié étant utilisée pour éclairer le sujet et l'autre moitié utilisée comme référence pour la phase des ondes lumineuses. La référence génère une impression de profondeur. Cependant, ces hologrammes, développés au milieu du XXe siècle, étaient statiques et donc incapables de capturer le mouvement. Et la méthode n’a produit qu’une seule copie papier.

Pour résoudre le problème de l'occlusion, ils ont également fourni un nouvel ensemble de calculs basés sur la physique. L'algorithme, avec un ensemble de données d'entraînement photoréalistes, a optimisé ses propres calculs, améliorant ainsi sa capacité à générer des hologrammes. Le réseau fonctionnait des ordres de grandeur plus rapidement que les calculs basés sur la physique. La méthode est capable de générer des hologrammes en quelques millisecondes à partir d’images contenant des informations de profondeur – fournies par des images typiques générées par ordinateur et peut être calculée avec une configuration multicaméra ou un capteur lidar. Le réseau tenseur compact nécessite moins de 1 Mo de mémoire. «C'est négligeable, compte tenu des dizaines et des centaines de gigaoctets disponibles sur le dernier téléphone portable», a déclaré le chercheur Wojciech Matusik.En VR, l'équipe pense que la technologie pourrait fournir des paysages plus réalistes et éliminer fatigue oculaire et autres effets secondaires de l’utilisation à long terme de la réalité virtuelle. La technologie pourrait également être utilisée dans des écrans capables de moduler la phase des ondes lumineuses. «C'est un progrès considérable qui pourrait complètement changer l'attitude des gens à l'égard de l'holographie», a déclaré Matusik. « Nous avons l'impression que les réseaux de neurones sont nés pour cette tâche. » Les travaux ont été publiés dans Nature (www.doi.org/10.1038/s41586-020-03152-0).