Offres d’emploi
Intitulé du poste : Ingénieur·e en IA générative et robotique sociale
Contexte :
Le poste s’inscrit dans le projet PostGenAI@Paris, un programme interdisciplinaire porté par Sorbonne Université, l’AP-HP (IHU ICAN), et Enchanted Tools. L’objectif du projet est de concevoir un robot social mobile, intégrant des modèles d’intelligence artificielle générative pour améliorer les interactions avec les patients et les soignants en milieu hospitalier. Le robot Mirokai (Enchanted Tools) servira de plateforme principale d’expérimentation.
Missions :
– Développement d’un système d’interaction conversationnelle basé sur User-VLM 360.
– Intégration des modules de navigation, parole, perception visuelle et expressions faciales sur le robot Mirokai.
– Participation à la modélisation des comportements sociaux du robot : positionnement, regard, gestion des rôles dans un groupe.
– Implémentation d’interactions robot-humains en mouvement dans un environnement hospitalier.
– Contribution à la définition des scénarios cliniques et collecte des premières données expérimentales.
– Collaboration étroite avec des chercheurs, cliniciens et partenaires industriels.
Profil recherché :
– Diplôme d’ingénieur ou Master 2 en IA, robotique, informatique ou domaine connexe.
– Première expérience dans un laboratoire de recherche ou dans l’industrie autour de la robotique et de l’IA.
– Intérêt marqué pour les interactions humain-robot, l’IA générative et les applications sociétales.
– Volonté potentielle de s’orienter vers une thèse de doctorat (fortement encouragée).
Compétences requises :
– Maîtrise de Python, ROS2, et des environnements distribués (Docker, Git).
– Connaissances solides en robotique mobile et perception multimodale.
– Expérience avec des modèles d’IA générative (LLM, VLM), NLP ou vision.
– Bon niveau en anglais technique et scientifique.
– Esprit d’initiative, rigueur, autonomie, et goût pour le travail interdisciplinaire.
Informations complémentaires :
– Lieu : ISIR, Sorbonne Université, Paris
– Contrat : CDD 12 mois (renouvelable)
– Date de début souhaitée : juin / juillet 2025
Personne à contacter :
Mahdi Khoramshahi ; mahdi.khoramshahi@isir.upmc.fr
Candidature : Envoyer votre candidature par mail, avec [Application] en objet, un CV et une lettre de motivation.
Date limite de dépôt de la candidature : 31 mai 2025
Job title: Machine learning for human-robot collaboration
Context and objectives :
This position focuses on developing machine learning techniques to enhance human awareness in human-robot interaction by integrating situation assessment and action planning. The successful candidate will contribute to cutting-edge research at the intersection of robotics, artificial intelligence, and human interaction, with an emphasis on designing and evaluating robotic systems that facilitate seamless collaboration with humans.
The position is for 18 months contract, but there is a possibility to be extended depending on the performance and circumstances. The position is open at both the engineer and post-doctoral levels for candidates with a strong background in machine learning, human-machine interaction, or robotics.
Responsibilities:
– Develop advanced situation assessment techniques using machine learning to accurately represent user preferences, behaviors, and characteristics based multimodal data to efficiently plan actions.
– Collaborate with interdisciplinary teams including computer scientists, humanities, and designers to ensure the usability and effectiveness of developed techniques.
– Publish research findings in top-tier conferences and journals in the field of Human-Machine Interaction and Machine Learning (mainly at the post-doc level)
Requirements :
The successful candidate should have:
– Experience in human-machine interaction
– Good knowledge of Machine Learning Techniques
– Good knowledge of experimental design and statistics
– Excellent publication record
– Strong skills in Python
– Willing to work in multi-disciplinary and international teams
– Good communication skills
Additional information:
– Contract start date: as soon as possible
– Contract duration: 18 months
– Quota of work : 100%
– Level of education required: Master’s degree / Engineering school – Doctorate
– Salary: depending on experience
– Host laboratory: ISIR (Institut des Systèmes Intelligents et de Robotique), Campus Pierre et Marie Curie, 4 place Jussieu, 75005 Paris.
Application :
Interested candidates should submit the following by email in a single PDF file to: mohamed.chetouani[@]sorbonne-universite.fr with the subject: Application ML for Human-Robot Collaboration
– Curriculum vitae with 2 references (recommendation letters are also welcome)
– One-page summary of research background and interests
– At least three papers (either published, accepted for publication, or pre-prints) demonstrating expertise in one or more of the areas mentioned above
– Doctoral dissertation abstract and the expected date of graduation for a post-doc position levale (for those who are currently pursuing a Ph.D)
Application’s deadline: April 21, 2025.
Intitulé du poste : Post-doctorat de 1,5 ans en éthique de l’apprentissage ouvert en robotique et en IA
Contexte :
Le projet européen PILLAR-Robots (https://pillar-robots.eu) vise à développer une nouvelle génération de robots dotés d’un niveau d’autonomie plus élevé, capables de déterminer leurs propres objectifs et d’établir leurs propres stratégies, en s’appuyant de manière créative sur l’expérience acquise au cours de leur vie pour satisfaire les demandes de leurs concepteurs/utilisateurs humains dans des cas d’utilisation d’applications réelles. Pour ce faire, il vise à mettre en œuvre une nouvelle extension théorique du formalisme de l’apprentissage par renforcement, appelée the purpose framework*, qui constitue une abstraction indépendante du domaine d’un ensemble d’objectifs exprimant ce que le concepteur/utilisateur attend du robot. Cela permet de contraindre l’exploration et l’apprentissage autonomes des robots de façon à (1) se concentrer sur les objets et les parties de l’environnement pertinents pour la tâche, et à (2) éviter d’atteindre des états particuliers de l’environnement ou d’agir d’une manière qui ne correspond pas aux objectifs, aux préférences et aux valeurs humaines.
*Baldassarre, G., Duro, R. J., Cartoni, E., Khamassi, M., Romero, A., & Santucci, V. G. (2024). Purpose for Open-Ended Learning Robots: A Computational Taxonomy, Definition, and Operationalisation. arXiv preprint arXiv:2403.02514.
Lieu et environnement :
Le poste de postdoctorant sera situé à l’Institut des Systèmes Intelligents et de Robotique (ISIR, http://www.isir.upmc.fr), Paris, France. L’ISIR appartient à Sorbonne Université, au CNRS et à l’INSERM, et est situé dans le centre de Paris, à quelques pas de la Seine, d’autres institutions académiques (La Sorbonne, le Collège de France, le Muséum d’Histoire Naturelle, l’École Normale Supérieure, l’Université Paris Cité, l’Hôpital la Pitié Salpêtrière), et de monuments célèbres (Notre Dame, la Conciergerie, le Panthéon, le Théâtre du Châtelet, l’Institut du Monde Arabe). Il n’est pas nécessaire de parler ou de comprendre le français. Ce travail se fera en étroite collaboration avec les philosophes, les ingénieurs et les neuroscientifiques computationnels du consortium européen PILLAR-Robots.
Missions :
Le travail postdoctoral portera sur les possibilités d’alignement et de désalignement de tels robots reposant sur l’apprentissage ouvert. En particulier, des recherches seront menées sur la manière dont la combinaison du moteur de motivation du robot PILLAR, qui s’appuie sur the purpose framework, avec de grands modèles de langage (LLM) peut faciliter l’alignement, et dans quelles conditions. L’explicabilité, la confiance et l’efficacité de la coordination humain-robot seront évaluées dans un ensemble de scénarios réels, correspondant aux trois cas d’usages du projet : un scénario d’entrepôt, un scénario de robotique agricole et un scénario ludo-éducatif. Une analyse éthique sera réalisée en consultant les membres du consortium sur l’ensemble de ces trois scénarios.
Profil recherché :
Nous recherchons des candidats très motivés ayant un solide dossier académique. Une excellente formation est attendue en apprentissage automatique, en IA, en robotique cognitive ou en neurosciences computationnelles. Une expérience significative dans les architectures cognitives des robots, l’alignement de l’IA, les LLM ou la modélisation computationnelle pour les neurosciences ou la psychologie sera appréciée. Des connaissances préalables en philosophie de l’esprit et en philosophie morale seront un atout. Critères d’éligibilité : Doctorat dans une discipline quantitative. Il n’y a pas de critère de nationalité ou d’âge.
Compétences requises :
La maîtrise de l’apprentissage par renforcement et de la théorie des jeux, un très bon niveau en mathématiques appliquées et des compétences de programmation avancées en C++ moderne et en python sont nécessaires. Très bon niveau d’anglais (écrit et oral).
Informations générales :
– Type de poste : Post-doctorat
– Date de début de contrat : 01/10/2025
– Durée du contrat : 18 mois (jusqu’au 30/03/2027)
– Quotité de travail : 100%
– Expérience souhaitée : à partir de Débutant
– Niveau d’études souhaité : Doctorat
– Montant rémunération : Rémunération habituelle pour les post-doc
– Source du financement : Projet européen PILLAR-Robots
– Laboratoire d’accueil : ISIR (Institut des Systèmes Intelligents et de Robotique), Campus Pierre et Marie Curie, 4 place Jussieu, 75005 Paris.
Personne à contacter :
– Mehdi Khamassi
– Tel:+33650764492 Email : mehdi.khamassi@sorbonne-universite.fr
– Candidature : Envoyer votre candidature par mail, avec [PILLAR post-doc application] en objet, un CV, une lettre de motivation (max 2 pages) et une liste de deux références.
– Date limite de dépôt de la candidature : 07/05/2025
Post-doctorat : Robotique et apprentissage machine open source, application à des robots manipulateurs mobiles
Contexte :
Ce recrutement est réalisé dans le cadre du projet Comité Robotique France 2030 qui vise à augmenter, en particulier au niveau national, les échanges entre la recherche publique et le monde économique en facilitant le transfert des connaissances et résultats issus de la recherche vers les acteurs susceptibles de les transformer dans différents champs d’application. Le domaine concerné est celui de la conception de systèmes robotiques intelligents, dans tous les secteurs d’activités qui peuvent être impactés par ces technologies et dans un contexte de ré- industrialisation des territoires et de transformation numérique, écologique et énergétique. Les actions proposées visent à développer l’offre technologique « RobDeepTech » et « open-source robotics » et à faciliter leur intégration et valorisation.
Missions :
Ce poste a un double objectif : (1) identifier les principales contributions à la robotique open- source à l’échelle nationale et contribuer à les faire connaître et (2) apporter une contribution significative à un ou plusieurs projets open-source à l’intersection entre apprentissage machine et robotique.
La première partie consistera à réaliser, en concertation avec des membres de différents laboratoires du CNRS, une cartographie des principaux outils mis à la disposition de la communauté en open-source par les laboratoires français. Ce travail de recensement sera complété par la participation à des actions visant à les faire connaitre auprès des acteurs susceptibles de les utiliser dans différents domaines d’application.
La deuxième partie consiste à contribuer à un des projets de l’ISIR entre apprentissage machine et robotique dans le but de mettre à disposition les développements réalisés en open-source. Le projet ciblé portera sur le développement de nos robots manipulateurs mobiles (https://www.isir.upmc.fr/projets/apprentissage-robotique-pour-la-manipulation-mobile-et- linteraction-sociale/). Le candidat contribuera à une des dimensions du projet, par exemple sur la saisie d’objets (par exemple https://qdgrasp.github.io/), la manipulation avec retour tactile, les modèles de langues et multi-modaux, ou l’interaction sociale. Les travaux réalisés sont destinés à être mis à disposition de la communauté. Ils seront donc distribués en open source.
La dimension expérimentale sera essentielle : les travaux réalisés seront appliqués sur des robots réels disponibles à l’ISIR (Bras Franka, TIAGO, PR2) en interaction avec l’équipe en place pour ces développements et que ce poste viendra renforcer.
Profil recherché :
Les candidats à ce poste doivent disposer d’une expérience significative en robotique et, si possible, en apprentissage machine. Les candidats ayant une forte expérience en apprentissage machine sans expérience en robotique peuvent également candidater dès lors que leurs travaux peuvent s’appliquer à la robotique. Il est donc attendu que les candidats aient une thèse en robotique, ou avec des applications en robotique ou bien encore une thèse en apprentissage machine sur un thème ouvrant des possitilités en robotique.
Le fait d’avoir déjà contribué à des projets open-source n’est pas obligatoire, mais sera apprécié.
Les candidats ayant une expérience approfondie de l’intégration sur robots réels sont particulièrement encouragés à candidater.
Compétences requises :
– Expérience en robotique, a minima sur des simulateurs (pybullet, isaac-sim, gazebo, …), mais idéalement sur robot réel et sous ROS. Si ce n’est pas le cas, une solide expérience en apprentissage automatique sera attendue sur des méthodes pouvant s’appliquer à la robotique.
– Expérience en apprentissage machine fortement encouragée
– Volonté d’aller interagir avec différentes équipes de recherche en France
– Travail en équipe
– Bonnes compétences en communication
Informations générales :
– Type de poste : Post–Doc
– Date de début de contrat : Dès que possible
– Durée du contrat : 36mois
– Quotité de travail : 100%
– Niveau d’études souhaité : Thèse
– Laboratoire d’accueil : ISIR (Institut des Systèmes Intelligents et de Robotique), Campus Pierre et Marie Curie, 4 place Jussieu, 75005 Paris.
Personne à contacter :
– Stéphane Doncieux / Aline Baudry
– Tel:+33144278745
– Email : stephane.doncieux@sorbonne-universite.fr / aline.baudry@sorbonne-universite.fr
– Candidature : Envoyer votre candidature par mail, avec [nom de l’offre] en objet, un CV et une lettre de motivation.
– Date limite de dépôt de la candidature : 10/02/2025
Post-doctorat « Robotique souple et jumeau numérique pour la chirurgie cardiaque »
Contexte :
Le travail de post-doc s’inscrit dans le cadre d’un projet RHU-ICELAND qui regroupe plusieurs partenaires académiques, hospitaliers et un industriel. L’objectif du projet est de développer une nouvelle solution d’annuloplastie de la valve mitrale par voie transfémorale intégrant une échographie intra-cardiaque. Une telle solution permettra d’intervenir à cœur battant, sans circulation extracorporelle, fournissant ainsi, en première phase, une solution de réparation de la valve mitrale pour les patients considérés à haut risque qui ne sont pas éligibles à la chirurgie ouverte, et plus loin pour la plupart des patients nécessitant une réparation de la valve mitrale.
L’annuloplastie directe consiste à fixer un anneau ou une bande directement sur l’anneau mitral à l’aide d’ancres sous guidage direct écho-cardiographique et fluoroscopique. L’avantage de cette technique est qu’elle contraint la forme de l’anneau mitral, reproduisant ainsi au plus près l’annuloplastie mitrale chirurgicale. Le projet RHU-ICELAND porte sur deux phases essentielles : le développement d’un modèle numérique de l’anatomie et du système robotique permettant la dépose des agrafes sur la valve mitrale, et ensuite la conception et l’évaluation du système robotique validé au préalable en numérique.
Objectifs scientifiques :
Dans un premier temps, le ou la post-doc recruté(e) se penchera sur la modélisation numérique de la partie anatomique (veines, cœur, valve mitrale…). Un premier travail a été réalisé sur la conception du modèle numérique du cœur et de la valve mitrale avec des cycles d’ouverture et de fermeture. L’objectif est de venir enrichir ce modèle pour le rendre le plus réaliste possible. Le modèle sera utilisé à la fois pour la formation des cliniciens, le planning préopératoire de l’intervention mais aussi à valider les modèles géométriques, cinématiques et dynamiques du système robotique (cathéter actif) lors de sa navigation entre le point d’entrée (veine fémorale) jusqu’à son arrivée sur site (face à la valve mitrale). L’autre objectif à moyen et long terme est d’avoir un modèle numérique réaliste et surtout patient spécifique, c’est à dire construire le modèle numérique basé sur les images pre-opératoire du patient.
Le ou la candidat(e) recruté(e) prendra place dans le contexte d’une collaboration étroite avec les équipes académiques et cliniques impliquées dans le projet notamment au moment d’intégrer les travaux dans le démonstrateur final. Le ou la post-doc bénéficiera d’un environnement de recherche stimulant et d’un accès à des données cliniques des partenaires cliniques et industriels du projet. Il ou elle participera à la gestion du projet (participation aux réunions, prise de décisions, rédaction de rapports…).
Structure d’accueil :
Le ou la candidat(e) recruté(e) intégrera l’Institut des Systèmes Intelligents et de Robotique (ISIR) de Sorbonne Université et du CNRS (Paris). L’ISIR est organisé en plusieurs équipes pluridisciplinaires dont RPI-Bio. Parmi les activités de recherche abordées par les chercheuses et les chercheurs, la microrobotique, les drones, la robotique chirurgicale, les prothèses bioniques, les robots sociaux, et toutes sortes de systèmes intelligents et interactifs, physiques, virtuels ou de réalité mixte, l’intelligence artificielle… Leurs applications adressent des enjeux sociétaux majeurs : santé, industrie du futur, transports, et service à la personne.
L’équipe RPI-Bio (robotique, perception et interaction pour le biomédical), dans laquelle le ou la post- doc recruté(e) sera rattaché(e), mène des recherches en robotique pour la santé sur le thème des systèmes interactifs pour l’aide au geste expert (chirurgie), de perception (visuel et haptique), d’interfaces humain-machine, de télémédecine et de microrobotique. RPI-Bio récemment labellisée Inserm possède notamment une longue expérience en développement de solutions robotiques avancées pour la médecine interventionnelle (orthopédie, neurochirurgie, chirurgie ORL, interventions endovasculaires…).
Profil recherché :
– Robotique, mécatronique, simulation et/ou modélisation numérique
– Compétences avancées en programmation (C++, Matlab, Python)
– La maîtrise d’une librairie de simulation numérique de robots souples (e.g., SOFA) sera un plus
– Enthousiasme pour la recherche interdisciplinaire et esprit de collaboration
Informations générales :
– Encadrants : Lingxiao Xun ; Brahim Tamadazte
– Date de début de contrat : dès que possible
– Durée du contrat : 12 mois renouvelable pour 12 mois supplémentaires
– Salaire : en fonction de l’expérience
– Laboratoire d’accueil : ISIR (Institut des Systèmes Intelligents et de Robotique), Campus Pierre et Marie Curie, 4 place Jussieu, 75005 Paris
Personne à contacter :
Envoyer, un seul fichier pdf rassemblant : un CV, une lettre de motivation et les articles scientifiques que vous jugez utiles au dossier à lingxiao.xun@sorbonne-universite.fr et brahim.tamadazte@cnrs.fr. Merci de mettre en objet du mail « post-doc rhu ».
Post-doc : « Apprentissage en robotique, avec application à la saisie d’objets »
Contexte :
Dans le cadre du projet FET Proactive DREAM (http://dream.isir.upmc.fr/), une approche de la robotique adaptative basée sur l’apprentissage ouvert a été définie. L’objectif principal est de permettre à un robot d’apprendre sans nécessiter une préparation minutieuse par un expert. Cette approche soulève de nombreux défis, notamment l’apprentissage avec des récompenses rares, l’apprentissage de représentations (pour les états et les actions), l’apprentissage et l’exploitation de modèles, le transfert d’apprentissage, le méta apprentissage et la généralisation. Ces sujets sont considérés en simulation, mais aussi sur des plateformes robotiques réelles, notamment dans le contexte de la saisie d’objets.
Missions :
Ce poste vise à contribuer à ces sujets dans le cadre de plusieurs projets européens, en particulier SoftManBot, Corsmal, INDEX et Learn2Grasp. S’appuyant sur les travaux antérieurs de l’équipe de recherche, les approches proposées devront être facilement adaptables à différentes plateformes robotiques et seront donc appliquées à différents robots (bras Panda de Franka-Emika, Baxter, PR2 ou TIAGO, par exemple).
Profil recherché :
Les candidats à ce poste doivent être titulaires d’un doctorat en apprentissage machine ou dans un domaine connexe dans lequel des applications robotiques (simulées ou réelles) ont été considérées.
Compétences requises :
Une excellente formation est attendue en apprentissage machine ainsi qu’une expérience en robotique. D’excellentes compétences en programmation en Python sont attendues.
Plus d’informations :
- Type de poste : Chercheuse / Chercheur post-doctoral
- Durée du contrat : 24 mois
- Niveau d’études souhaité : Doctorat
- Montant rémunération : Rémunération en fonction de l’expérience
- Laboratoire d’accueil : ISIR (Institut des Systèmes Intelligents et de Robotique), Campus Pierre et Marie Curie, 4 place Jussieu, 75005 Paris.
Personne à contacter :
- Stéphane Doncieux
- stephane.doncieux(at)sorbonne-universite.fr
- Envoyer votre candidature par mail, avec [nom de l’offre] en objet, un CV et une lettre de motivation.
Offres de doctorat, postdoctorat ou d’ingénieur·e de recherche pour le groupe HCI Sorbonne (Human Computer Interaction)
Contexte :
Nous avons plusieurs postes pour un postdoctorat ou en tant qu’ingénieur·e de recherche dans le groupe HCI Sorbonne (https://hci.isir.upmc.fr) à Sorbonne Université, Paris, France.
Missions :
Nous cherchons des personnes curieuses qui souhaitent réaliser des projets de recherche à l’intersection de l’IHM et neuroscience avec (au choix) la RV, l’haptique, la robotique ou l’IA. Des sujets possibles sont :
- Nouvelles techniques d’interaction en RV,
- RV et Haptique pour le jeux et/ou l’apprentissage,
- Modèles computationnels pour l’apprentissage, la prise de décision et la performance humaine,
- Systèmes de recommandation s’appuyant sur l’IA.
Exemples de travaux récents dans ces domaines :
- CoVR (UIST21): https://dl.acm.org/doi/10.1145/3379337.3415891
- AI-based Recommendation systems (CSCW 21): https://dl.acm.org/doi/abs/10.1145/3476068?sid=SCITRUS
- Adapting UIs with Reinforcement Learning (CHI 21): https://dl.acm.org/doi/abs/10.1145/3411764.3445497
- Mixed Control of Robotic systems (CHI 20): https://dl.acm.org/doi/10.1145/3313831.3376795
Profil recherché :
Pour un post-doctorat, un doctorat en IHM ou un domaine en lien avec l’IHM est nécessaire.
Compétences requises :
- Compétences solides en programmation et analyse strong programming and analytical skills,
- Solide expérience dans au moins un de ces domaines : IHM, RV, Haptique, Robotique, IA.
Plus d’informations :
- Type de poste : Postdoctorat ou Ingénieure de Recherche
- Date de début de contrat : dès que possible
- Durée du contrat : 1 à 2ans
- Niveau d’études souhaité : Master 2 (pour ingénieur), doctorat (pour post-doc)
- Laboratoire d’accueil : ISIR (Institut des Systèmes Intelligents et de Robotique), Campus Pierre et Marie Curie, 4 place Jussieu, 75005 Paris.
Personnes à contacter :
- Gilles Bailly et Sinan Haliyo
- Email : gilles.bailly(at)sorbonne-universite.fr ; sinan.haliyo(at)sorbonne-universite.fr
- Candidature : Envoyer votre candidature par mail, avec un CV et une lettre de motivation.
- Date limite de dépôt de la candidature : Aucune
Offres de thèse
Sujet de thèse : Génération de modèles 3D de structures anatomiques par apprentissage profond à partir d’images 2D
Contexte :
Le nombre d’interventions en chirurgie du rachis augmente de façon régulière, tant pour les cas liés à la traumatologie que pour les pathologies dégénératives. Dans ce second cas, la hausse s’explique entre autres par le vieillissement de la population et possiblement par des changements dans les habitudes de vie, comme une hausse de la sédentarité et de l’obésité. En plus de cette augmentation des cas de dégénérescence du rachis, on observe également une augmentation des capacités de diagnostic, de nouvelles modalités de traitement ainsi qu’un élargissement des indications cliniques. À titre d’exemple, environ 450 000 arthrodèses ont été réalisées en 2014 aux seuls États-Unis, en hausse de 118 % depuis 1998. Le cas des fusions lombaires représentait à lui seul environ 200 000 interventions aux États-Unis en 2015, soit 62 % de plus par rapport à 2004, pour un coût de plusieurs dizaines de milliers de dollars par opération et un coût annuel total de plusieurs milliards de dollars. Au niveau mondial, plusieurs millions de vis dites pédiculaires sont ainsi placées annuellement dans le cadre de chirurgies rachidiennes.
Le traitement des scolioses est chirurgical. Il consiste à insérer des vis dans les pédicules vertébraux pour stabiliser la colonne. Ces vis sont connectées par des tiges permettant de corriger la courbure anormale en trois dimensions. Cette technique assure une fixation rigide, favorisant la fusion vertébrale et améliorant les résultats fonctionnels et esthétiques. La pose de ces vis s’avère complexe et difficile, en particulier chez certains patients. La littérature rapporte qu’en moyenne, sans système d’assistance, environ 24 % des vis pédiculaires sont mal positionnées, impliquant, à terme, des symptômes neurologiques potentiellement graves.
En parallèle d’une augmentation du volume de vis pédiculaires placées, le domaine de la chirurgie assistée par ordinateur a connu un essor important à travers le développement de solutions de navigation tridimensionnelle, de l’utilisation de la robotique ou encore des méthodes de réalité augmentée/mixte. Chacune de ces solutions apporte ses propres avantages et inconvénients. Par exemple, les systèmes de navigation rendent le placement de vis pédiculaires plus accessible aux chirurgiens juniors et réduisent certains risques et complications. Cependant, ils impliquent des coûts élevés, peuvent prolonger la durée des interventions chirurgicales et sont moins précis lorsque leur utilisation n’est pas optimale. La robotique ou encore la réalité augmentée/mixte apporte une valeur ajoutée clinique notamment dans la phase d’insertion des vis dans les pédicules en considérant que la planification des trajectoires d’insertion est connue.
Objectifs scientifiques :
Dans un travail récent, en collaboration entre Sorbonne Université, l’Hôpital Trousseau et l’entreprise SpineGuard, nous avons levé plusieurs verrous scientifiques sur l’insertion des vis pédiculaires de manière sécurisée. Nous avons notamment développé une plateforme robotique de chirurgie du rachis fonctionnelle ainsi que des méthodes de détection de brèches en temps-réel permettant de stopper la tâche d’insertion de la vis avant qu’une brèche ne soit créée dans le canal rachidien. Cependant, les approches développées jusqu’à maintenant partent du postulat que la trajectoire 3D d’insertion de la vis dans le pédicule est connue précisément dans le monde réel.
Ce projet doctoral vise précisément à répondre à cette problématique d’estimation de la trajectoire 3D d’insertion des vis lors de l’intervention. Actuellement, la planification des trajectoires est réalisée par le chirurgien sur de l’imagerie pré-opératoire (ex. CT scan). Ces trajectoires sont ensuite transposées sur le patient le jour de l’intervention, en supposant que le modèle 3D pré-opératoire correspond exactement à ce que voit le chirurgien.
Par ailleurs, le geste chirurgical en lui-même induit des déformations en temps-réel qui mettent à mal le recalage et la planification des trajectoires. Afin d’améliorer ce recalage et donc la précision des gestes de chirurgie, nous souhaitons explorer l’utilisation d’un capteur visuel 2D conventionnel non-irradiant (e.g., caméra RGB) pour accéder, en temps réel, à la partie supérieure (visible) de la colonne vertébrale pendant l’opération. En d’autres termes, cela revient à observer les épineuses et les processus transverses. Le verrou scientifique que nous proposons d’explorer est de reconstruire en 3D chaque vertèbre en utilisant l’information visuelle 2D des images RGB grâce à des méthodes d’apprentissage profond. Cette discipline, relativement récente, a reçu un intérêt grandissant de la communauté Vision par Ordinateur, faisant significativement progresser l’état de l’art. Ainsi, jusqu’à récemment, la reconstruction d’un modèle 3D nécessitait plusieurs vues 2D de l’objet/scène ou a minima de disposer d’une large base de données de paires images 2D – modèles 3D (e.g., CAO) annotées, ce qui limitait grandement le déploiement vers des disciplines comme la chirurgie à cause du manque de données annotées.
Pour répondre aux verrous scientifiques et aux besoins cliniques, plusieurs pistes de travail sont envisagées. Une première piste consiste à générer des images 2D de synthèse à partir des modèles 3D, puis à faire de l’adaptation de domaine de manière à bénéficier d’un apprentissage auto-supervisé de la transformation 2D/3D. Cette méthode, proposée pour des objets rigides, pourrait être étendue aux objets non rigides grâce aux champs de vecteurs de déplacement. Une autre piste, qui semble prometteuse, est issue des travaux récents permettant de reconstruire un modèle 3D à partir d’une simple vue 2D. Les outils employés par ces méthodes, et notamment les triplans, pourrait être utilisés pour notre application, en les déployant localement pour chaque vertèbre. Un réseau de contexte de scène basé sur un graphe pourrait ensuite affiner la pose 3D initiale de chaque vertèbre et leur agencement relatif.
Nous disposons déjà d’une base de données de vertèbres segmentées et annotées issues de scans de patients que nous enrichissons continuellement. En conséquence, la prédiction de la forme 3D des vertèbres à partir des images 2D peut être enrichie par l’information 3D des scans.
Equipe encadrante :
Elle sera constituée de Brahim Tamadazte (DR CNRS, ISIR, SU), Catherine Achard (PU, ISIR, SU) et Raphaël Vialle (PUPH, APHP, Hôpital Trousseau, SU). La collaboration entre l’ISIR et l’Hôpital Trousseau est bien établie, notamment à travers la participation au projet EU H2020 FAROS, au projet FHU SpineMed2, ou encore au projet ANR RODEO, donnant lieu à plusieurs co- encadrements de thèses (3) et médecins-stagiaires (2). Ces collaborations ont permis de structurer une activité de recherche importante autour de l’utilisation de la robotique, de la vision par ordinateur et de l’IA pour améliorer les protocoles de chirurgie du rachis.
Nous avons l’habitude, dans ce type d’encadrement entre l’ISIR et un centre hospitalier, d’associer un ou plusieurs médecins-internes qui viennent réaliser des stages de master d’une durée de 6 à 12 mois. Cela permet une meilleure interaction entre le monde médical et la recherche académique. Ce modèle a largement fait preuve de sa capacité translationnelle, donnant lieu à la création de plusieurs entreprises (Basecamp Vascular, MovaLife) ou à la commercialisation de dispositifs médicaux via des entreprises spécialisées (Endocontrol, Koelis, GEMA, Moon Surgical, GE Healthcare, Robeauté et SpinGuard).
Candidature :
Il existe deux possibilités de financements (IUIS et ED SMAER) de ce projet de thèse. Il faut donc faire une double candidatures (date limite 5 mai 2025) :
– ED SMAER : https://adum.fr/as/ed/voirproposition.pl?langue=&site=edsmaer&matricule_prop=62877
– IUIS : https://lime3-app3.sorbonne-universite.fr/index.php/283197?lang=fr
Contacts :
– Catherine Achard, PU Sorbonne Université (ISIR), catherine.achard@sorbonne-universite.fr
– Brahim Tamadazte, DR CNRS (ISIR), brahim.tamadazte@cnrs.fr
Offres de stage
Sujet du stage : Conception d’un environnement virtuel couplé à un système haptique pour la formation dentaire
Contexte et laboratoire d’accueil :
Dans le cadre d’une collaboration entre l’Institut des Systèmes Intelligents et de Robotique (ISIR: https://www.isir.upmc.fr) avec une jeune entreprise innovante en formation et en chirurgie dentaire (Augmenteeth : https://augmenteeth.com/), nous visons à transformer la pratique de l’implantologie dentaire en intégrant des technologies de pointe pour améliorer la précision, la sécurité et l’efficacité du gestion chirurgical. Ceci passera forcément par la formation des étudiant.e.s en chirurgie dentaire en apportant des solutions technologiques de formation en complément ou en rupture avec les pratiques actuelles, à l’exemple du virage pris ces dernières années par d’autres disciplines de chirurgie.
Le ou la stagiaire recruté.e intégrera l’Institut des Systèmes Intelligents et de Robotique (ISIR) de Sorbonne Université et du CNRS (Paris). L’ISIR est organisé en plusieurs équipes pluridisciplinaires dont RPI-Bio. Parmi les activités de recherche abordées par les chercheuses et les chercheurs, la microrobotique, les drones, la robotique chirurgicale, les prothèses bioniques, les robots sociaux, et toutes sortes de systèmes intelligents et interactifs, physiques, virtuels ou de réalité mixte, l’intelligence artificielle… Leurs applications adressent des enjeux sociétaux majeurs : santé, industrie du futur, transports, et service à la personne.
L’équipe RPI-Bio (robotique, perception et interaction pour le biomédical), dans laquelle le ou la stagiaire recruté.e sera rattaché.e, mène des recherches en robotique pour la santé sur le thème des systèmes interactifs pour l’aide au geste expert (chirurgie), de perception (visuel et haptique), d’interfaces humain- machine, de télémédecine et de microrobotique. RPI-Bio récemment labellisée Inserm possède notamment une longue expérience en développement de solutions robotiques avancées pour la médecine interventionnelle (orthopédie, neurochirurgie, chirurgie ORL, interventions endovasculaires…).
Objectifs du stage :
Dans un premier temps, il sera demandé au ou à la stagiaire recruté.e d’étudier les besoins en termes d’apprentissage et de formation des étudiant.e.s en chirurgie dentaire à travers notamment des questionnaires réalisés avec des chirurgiens dentaires. Cette étude sera complétée par une recherche bibliographique et veille technologique relatives à la formation dentaire.
Dans un second temps, il sera question de la mise en œuvre de l’environnement de formation qui s’articule en deux étapes essentielles :
– Première étape : La première étape consistera en la mise en place d’un environnement virtuel (jumeau numérique) composé d’un modèle numérique d’un patient (tête et buste) et des arcades dentaires supérieure et inférieure. Ces modèles numériques seront acquis dans le commerce, puis modifiés et adaptés pour permettre des mouvements d’ouverture et de fermeture de la mâchoire. Un modèle numérique d’une fraise dentaire type sera ajouté dans l’environnement virtuel.
– Seconde étape : La seconde étape sera consacrée au couplage du jumeau numérique avec un bras robotique à retour haptique de type Haption (https://www.haption.com/) qui sera équipé d’une fraise dentaire factice. Suivront le développement et l’implémentation de lois de commande (position, impédance) du bras haptique. L’objectif clinique est la restitution, au chirurgien-dentiste, des efforts de fraisage à travers le bras haptique. Les stratégies de commande seront évaluées dans le contexte de la réalisation du geste chirurgical (fraisage, extraction ou autre).
Profil recherché :
– Robotique/automatique, modélisation numérique et réalité virtuelle
– Compétences avancées en programmation (C++, Python), ROS2
– Connaissance des outils de conception 3D (Blender, SolidWorks ou équivalent)
– Intérêt marqué pour la recherche interdisciplinaire et esprit de collaboration
Informations complémentaires :
– Encadrant·e·s : Philippe Gauthier, Aline Boudry, Samuel Hadjes et Brahim Tamadazte
– Date de début du stage : mai / juin 2025
– Durée du stage : 6 mois
– Niveau d’études souhaité : Master 2 / Ingénieur
– Laboratoire d’accueil : ISIR (Institut des Systèmes Intelligents et de Robotique), Campus Pierre et Marie Curie, 4 place Jussieu, 75005 Paris.
Personne à contacter :
– Aline Boudry : aline.baudry@isir.upmc.fr
– Brahim Tamadazte : brahim.tamadazte@cnrs.fr
– Mode de candidature : envoyer votre candidature par email, avec [Stage] en objet, un CV, une lettre de motivation et les relevés de notes de M1 et M2 (ou équivalent).
Sujet du stage : Conception d’une interface haptique de téléopération pour une main robotique dextre
Résumé :
La saisie robuste et la manipulation à l’aide de mains dites « dextres » demeurent des défis majeurs en robotique moderne. Les approches récentes basées sur l’apprentissage automatique montrent un potentiel considérable pour l’acquisition de telles compétences par les systèmes robotiques. Cette acquisition repose sur l’utilisation de démonstrations humaines de qualité pour entraîner des modèles d’action robotique. Pour générer ces démonstrations, des interfaces de téléopération performantes sont indispensables, permettant à un opérateur expert de contrôler précisément le robot apprenant. Si plusieurs solutions existantes s’appuient uniquement sur la vision, de nombreuses études démontrent l’importance cruciale du retour haptique pour produire des démonstrations de haute qualité, essentielles à l’apprentissage robotique efficace.
Objectifs du stage :
Concevoir une interface mécanique de téléopération pour la main robotique Allegro, fonctionnant comme un exosquelette à interaction bidirectionnelle. Le dispositif permettra à l’opérateur de contrôler précisément le robot tout en recevant un retour d’effort haptique. Le travail comprendra d’abord le développement mécanique (conception et prototypage), puis la validation et l’implémentation du contrôleur sous ROS (C++/Python), afin d’améliorer l’apprentissage par démonstration pour la manipulation dextre. Le main robotique que nous souhaitons téléopérer est intégralement recouverte de capteurs tactiles, capables d’estimer les forces d’interactions entre la main et l’objet manipulé. Nous espérons que la mise en place de cette interface de téléoperation avec retour d’effort pour une main dextre équipée de capteurs tactiles et la collecte d’un premier jeu de données visio-tactiles résulteront en une potentielle publication scientifique.
Profil recherché :
Master 2 profil ingénieur-e, orientation mécanique/ mécatronique/ robotique.
Compétences requises :
Conception mécanique, logiciels courants de CAO (SolidWorks/Fusion 360/OnShape etc.), Prototypage rapide (Impression 3D, découpe laser…), programmation de robots (Python, c++, ROS).
Informations complémentaires :
– Encadrants : Elie Chelly, Mahdi Khoramshahi, Faïz Ben Amar
– Date de début du stage : mai / juin 2025
– Durée du stage : 6 mois
– Niveau d’études souhaité : Master 2
– Laboratoire d’accueil : ISIR (Institut des Systèmes Intelligents et de Robotique), Campus Pierre et Marie Curie, 4 place Jussieu, 75005 Paris.
Personne à contacter :
– Elie Chelly
– Email : chelly@isir.upmc.fr
– Envoyer votre candidature par mail, avec [Stage] en objet, un CV et une lettre de motivation.