Post-Doctorant F/H MGR -- Musical Graph Rag

Le Centre Inria de l’Université Grenoble Alpes, regroupe un peu moins de 600 personnes réparties au sein de 26 équipes de recherche et 9 services support à la recherche.

Son effectif est distribué sur 3 campus à Grenoble, en lien étroit avec les laboratoires et les établissements de recherche et d'enseignement supérieur (Université Grenoble Alpes, CNRS, CEA, INRAE, …), mais aussi avec les acteurs économiques du territoire.

Présent dans les domaines du calcul et grands systèmes distribués, logiciels sûrs et systèmes embarqués, la modélisation de l’environnement à différentes échelles et la science des données et intelligence artificielle, le Centre Inria de l’Université Grenoble Alpes participe au meilleur niveau à la vie scientifique internationale par les résultats obtenus et les collaborations tant en Europe que dans le reste du monde.

Dans le cadre d'une coopération avec la Philarmonie de Paris, nous cherchons à déveoper une approche RAG pour la recherche sur les enregistrements de ses conférences.

La Philharmonie cherche à améliorer les 2 aspects suivants:

• L’extraction des entités nommées

• La pertinence des résultats de recherche.

Extraction des entités nommées

Pour l’extraction d’entités nommées, il serait pertinent de considérer la possibilité de contraindre le modèle à utiliser un référentiel propre pour corriger les défauts de cette extraction.

L’exploitation d’un graphe de connaissance serait une piste concrète. En particulier, le modèle DOREMUS [https://bnf.hal.science/hal-04554020v1], limité à description des personnes et œuvres musicales dont la Philharmonie dispose dans son SIGB. Ce graphe devra pouvoir être facilement et souvent mis à jour, par un export simple des notices du SIGB.

Pertinence des résultats de recherche

Pour l’amélioration de la pertinence des résultats de recherche, la Philharmonie est confrontée à la problématique de l’intégration de plusieurs sources de données :

• Les métadonnées générées par les catalogueurs, qui décrivent sommairement les conférences (titre de la conférence, titres des parties, intervenants, quelques mots-clés)

• Le contenu texte des transcriptions

• Les vecteurs issus de la création des embeddings.

Une première approche pour améliorer la pertinence des résultats a été proposé. Cette approche injecte les métadonnées lors de la création des embeddings. Bien que cette opération se révèle globalement bénéfique, elle introduit simultanément un certain niveau de bruit informationnel, susceptible d’affecter la qualité des résultats obtenus. Une première question, de portée générale, concerne ainsi la valorisation optimale des métadonnées : quelles stratégies peuvent être mises en œuvre pour exploiter ces informations de manière à maximiser la précision, la cohérence et la robustesse des processus de recherche ?

Par ailleurs, le système de requêtes actuel n’exploite pas pleinement le contenu textuel des conférences auquel il a pourtant accès. L’intégration de cette dimension textuelle constitue une piste d’amélioration potentiellement significative. Il convient dès lors d’examiner dans quelle mesure la combinaison des approches fondées sur la proximité sémantique et sur la recherche plein texte traditionnelle pourrait contribuer à une meilleure hiérarchisation des résultats selon leur pertinence.

Enfin, la construction d’un graphe de connaissances dédié au domaine musical — incluant les entités telles que les œuvres, leurs interrelations et les artistes — ouvre la voie à de nouvelles perspectives d’analyse. Il s’agit en particulier d’évaluer dans quelle mesure l’exploitation de ce graphe peut permettre d’enrichir la représentation sémantique des entités et d’accroître la pertinence des résultats de recherche.

Une voie de développement complémentaire concerne l’exploitation du corpus constitué des quelque 4 700 programmes de salle (au format PDF) produits par la Philharmonie.

L’analyse et la structuration de ces documents ouvrent deux axes de recherche prioritaires :

• Enrichissement du graphe de connaissances : les programmes de salle contiennent une information riche sur les œuvres, les compositeurs, les interprètes, les dates et contextes de performance. Leur intégration permettrait d’améliorer la couverture et la granularité du graphe de connaissances dans le domaine musical.

• Adaptation fine des modèles linguistiques : ce corpus pourrait également être mobilisé pour le fine-tuning de modèles de langage spécialisés en musicologie et en traitement automatique des textes musicaux, favorisant ainsi une meilleure compréhension contextuelle des entités et des relations propres au domaine.

Étude de l’existant (POC développé par la Philharmonie, étude du corpus)

Réalisation d’un état de l ‘art concernant l’utilisation des techniques d’IA pour l’extraction d’entités nommées et sur les approches de récupération d’information.

Mise en place d’une méthode d’extraction d’entités nommées, potentiellement exploitant des graphes de connaissances de domaine.

Mise en place d’une méthode de calcul de pertinence de résultats des recherches sur le corpus de transcriptions de conférences audio et vidéo.

Evaluation des méthodes proposées.

Intégration des méthodes proposées dans l’interface de recherche de la Philharmonie et déploiement sur ses infrastructures.

Connaissances et compétences requises en matière de web sémantique, de modèles d'intégration et de recherche d'informations.

Compétences en développement logiciel : Python, web sémantiqueCompétences relationnelles : esprit d'équipe (communication verbale, écoute active, motivation etengagement).

Autres atouts appréciés : bon niveau d'anglais parlé et écrit.

• Restauration subventionnée
• Transports publics remboursés partiellement
• Congés: 7 semaines de congés annuels + 10 jours de RTT (base temps plein) + possibilité d'autorisations d'absence exceptionnelle (ex : enfants malades, déménagement)
• Possibilité de télétravail (après 6 mois d'ancienneté) et aménagement du temps de travail
• Équipements professionnels à disposition (visioconférence, prêts de matériels informatiques, etc.)
• Prestations sociales, culturelles et sportives (Association de gestion des œuvres sociales d'Inria)
• Accès à la formation professionnelle
• Sécurité sociale
• Accès à la formation professionnelle
• Participation employeur mutuelle santé (sous conditions)

2788 € brut / mois