Dans le cadre de nos travaux sur la réalité augmentée (RA) pour le technicien du futur, nous cherchons à simplifier la création de contenus interactifs 3D afin de permettre à des utilisateurs sans compétences en développement de créer des scénarios de guidage pour les techniciens de terrain (industrie, infrastructure réseau, etc.) Ces scénarios permettent d'afficher en réalité augmentée des guides pas à pas aux techniciens lors de leurs interventions. Pour cela nous disposons aujourd'hui d'un outil de création immersif intégrant des techniques d'IA générative.
Un exemple concret est la réalisation d'une application de réalité augmentée pour guider un technicien lors de l'installation d'un équipement dans un data-center. Une telle application peut guider le technicien vers l'emplacement du matériel à installer puis vers la baie ciblée, indiquer la position de ce nouvel équipement, détailler les câblages à réaliser, tout en affichant des consignes de sécurité.
En collaboration avec l'équipe, vous travaillerez sur l'élaboration d'un module d'IA générative capable de créer des guides pas à pas en réalité augmentée à l'aide des consignes d'un utilisateur expert et du jumeau numérique de l'environnement dans lequel se déroulera l'intervention du technicien. L'objectif sera d'aller plus loin que l'état de l'art qui se contente en général de génération de scènes statiques sans lien avec le monde réel ou avec une tâche concrète. Le module pourra s'appuyer sur un grand modèle de langage (LLM, ex : GPT) et des interactions immersives (VR) afin de créer des scènes statiques et dynamiques.
Votre mission :
- La création d'un générateur de contenus statiques capable de positionner des augmentations par rapport au monde réel en prenant en entrée les consignes de l'utilisateur et le jumeau numérique de l'environnement cible
- L'amélioration de ce générateur afin de créer des contenus de réalité augmentée dynamiques capables de réagir aux actions de l'utilisateur. Un exemple de contenu est l'affichage successif des étapes d'une intervention au fil des actions du technicien.
Votre environnement de travail sera principalement Unity, C# et python. Vous devrez également prendre en main un périphérique de réalité virtuelle comme le Meta Quest 3.
De formation Bac +5 (Master/Ecole d'ingénieur) en informatique avec un cursus orienté vers les applications interactives (2D et/ou 3D) et/ou l'intelligence artificielle, vous recherchez un stage de 6 mois.
Vous avez un bon niveau en programmation avec un langage parmi C++, C# ou Python.
Vous avez des connaissances dans la création et l'usage de modèles d'IA générative et dans la création d'applications 3D interactives avec Unity et C#.
Vous portez un intérêt au développement d'applications interactives telles que les applications de réalité virtuelle et de réalité augmentée ainsi que les jeux vidéo.
Au sein d'Orange Innovation, la direction eXperience Design Lab (xdlab) a pour ambition de mettre la compréhension de l'humain au coeur des projets et du processus d'innovation. Ses missions sont :
· La réalisation des éléments d'expérience pour les projets et produits du groupe, explorer et matérialiser de nouveaux concepts d'expérience en relation étroite avec les équipes Marketing et Techniques
· La construction de la vision Design et définir les fondamentaux de l'expérience Orange, développer les savoir-faire, outils et méthodes UX.
· Le développement de la compréhension du comportement et des motivations de l'humain dans les usages du numérique, et la diffuser dans les projets de Recherche, d'Anticipation et de delivery.
accès au CE, restauration collective
dès maintenant !