Doctorant F/H Description automatisée de scènes audio explicable et frugale

2 weeks ago

Brighton East Sussex, United Kingdom Inria Full time
Doctorant F/H Description automatisée de scènes audio explicable et frugale

Inria Défense&Sécurité (Inria D&S) a été créé en 2020 pour fédérer les actions d’Inria répondant aux besoins numériques des forces armées et forces de l’intérieur. La thèse sera réalisée au sein de l’équipe de recherche en traitement de l’audio de Inria D&S, sous la direction de Jean-François Bonastre et co-encadrée par Raphaël Duroselle.

La description automatisée de scènes audio consiste à présenter aux opérateurs un condensé des informations présentes dans la scène en question, sous la forme d’un texte augmenté. Ce condensé permet de faire ressortir de façon synthétique et visuelle les informations les plus importantes, tout en structurant efficacement l’accès aux informations précises. Pour illustrer ce point, un condensé pourrait prendre la forme suivante: «Dans cet enregistrement d’une durée de cinq minutes, trois locuteurs différents sont présents. Le locuteur A correspond à une identité connue dans la base de données et s’exprime en Français avec un fort accent du Monawa, les locuteurs B et C sont inconnus dans la base de données et s’expriment en Français dans leurs interactions avec A et dans une langue non identifiée lorsqu’ils parlent ensemble. Les voix de B et C présentent de fortes similitudes avec les locuteurs de la région du Quabar oriental. Le thème général de l’enregistrement concerne un transfert de marchandises entre les villes de Orienta et de Flagrance.La date du 8 Juillet 2023 est citée à trois reprises ». En cliquant sur A, l’opérateur disposera des informations sur A et sur les détails de l’identification vocale réalisée. L’accès aux segments temporels pendant lesquels A a parlé et à la transcription de ceux-ci sera direct. Dans cette transcription, les noms de personnes, de lieux ou les dates (les entités nommées) seront mises en évidence.

La thèse vise à proposer un cadre général pour le traitement des enregistrements audio dans le cadre du renseignement. Elle consiste à définir une application de haut niveau adaptée aux besoins des utilisateurs finaux promouvant la présentation d’un enregistrement sous la forme d’un rapport synthétique pour mettre en évidence les points saillants.

L’approche visée s’inspire à la fois de la description textuelle de scènes vidéo [1] et sur les systèmes de dialogue reposant sur des scènes audio-visuelle [2]. Le système reposera sur l’extraction de représentations du signal de parole à différentes échelles (trame, segment de parole ou événement sonore, enregistrement complet), éventuellement dédiées à des tâches différentes. Les représentations, utiles aux différentes briques technologiques du système seront des embeddings extraits de réseaux de neurones profonds, génériques [3] ou dédiés à chaque tâche. La fusion entre les différents niveaux d’information pourra être réalisée avec une architecture s’inspirant du schéma «Encodeur-Decodeur» multi-stream [4], avec plusieurs encodeurs produisant des séquences de représentations et un ou plusieurs décodeurs réalisant les tâches ou sous-tâches nécessaires au système. Un de ces décodeurs produira un descriptif textuel de la scène.

Des directions de recherche potentielles, visant à dépasser un système de description de scènes audio par assemblage de briques existantes, pourront être discutées et affinées avec le candidat.

  • Etat de l’art, constitution d’un système de description de scènes audio par assemblage des outils existants;
  • Définition de la tâche, élaboration d’un corpus et d’un protocole d’évaluation;
  • Travail sur l’alignement entre des représentations auto-supervisées du signal de parole et des grands modèles de langage;
  • Entraînement faiblement supervisé du système;
  • Evaluation des systèmes et confiance dans les prédictions.
  • Master 2 ou diplôme d’école d’ingénieur en informatique, mathématiques appliquées ou phonétique,
  • Intérêt marqué pour la recherche appliquée,
  • Maîtrise de l’anglais parlé et écrit,
  • Connaissances en traitement du signal,
  • Connaissances en apprentissage automatique de manière générale et dans les approches neuronales (deep learning) en particulier,
  • Connaissance pratique d’outils comme Pytorch, Keras ou Scikit-learn,
  • Expérience en traitement automatique de la parole, dont la connaissance de plateformes open-source comme Kaldi ou Speechbrain.
Références
  • Restauration subventionnée,
  • Transports publics remboursés partiellement,
  • Congés: 7 semaines de congés annuels + 10 jours de RTT (base temps plein) + possibilité d'autorisations d'absence exceptionnelle (ex : enfants malades, déménagement),
  • Possibilité de télétravail (2 jours par semaine) et aménagement du temps de travail,
  • Équipements professionnels à disposition (visioconférence, prêts de matériels informatiques, etc.),
  • Prestations sociales, culturelles et sportives (Association de gestion des œuvres sociales d'Inria),

Nous vous remercions d'adresser un CV accompagné d'une lettre de motivation.

#J-18808-Ljbffr

  • Doctorant F/H Description automatisée de scènes audio explicable et frugale

    2 weeks ago

    Brighton, East Sussex, United Kingdom Inria Full time

    Doctorant F/H Description automatisée de scènes audio explicable et frugale Inria Défense&Sécurité (Inria D&S) a été créé en 2020 pour fédérer les actions d’Inria répondant aux besoins numériques des forces armées et forces de l’intérieur. La thèse sera réalisée au sein de l’équipe de recherche en traitement de l’audio de Inria...

  • Pilote de Flux Région

    2 weeks ago

    Darvel, East Ayrshire, United Kingdom Saint-Gobain France Full time

    Rattaché(e) au Directeur Logistique de la récente plateforme logistique de Derval, tu seras en charge de la mise en œuvre opérationnelle du Plan produits défini avec le service marketing pour la plateforme et nos agences CEDEO rattachées. Ton rôle sera également de contribuer à l'optimisation de la mise en œuvre de l'offre (services, coûts,...

  • Pilote de Flux Région

    2 weeks ago

    Darvel, East Ayrshire, United Kingdom Saint-Gobain France Full time

    Rattaché(e) au Directeur Logistique de la récente plateforme logistique de Derval, tu seras en charge de la mise en œuvre opérationnelle du Plan produits défini avec le service marketing pour la plateforme et nos agences CEDEO rattachées. Ton rôle sera également de contribuer à l'optimisation de la mise en œuvre de l'offre (services, coûts,...

  • Expert en conseil global

    5 days ago

    North East England, United Kingdom bioMérieux SA Full time

    Localisation: Durham, États-Unis Type de Contrat: Contrat à Durée Indéterminée Fonction: Marketing Entreprise familiale, bioMérieux est un acteur mondial dans le domaine du diagnostic  invitro . Depuis 60 ans, partout dans le monde, nous concevons et développons des  solutions diagnostiques innovantes pour améliorer la santé des patients...

  • Manager.euse de rayon en équipement sportif

    4 days ago

    Horsham, West Sussex, United Kingdom Pigier Performance Paris Full time

    Manager.euse de rayon en équipement sportif - Dole / Pontarlier Référence : Domaine : MBA Manager du Développement Commercial d'Entreprise Secteur : Commerce / Management Localisation : Dole (39) - Pontarlier (25) La gestion des commandes et le suivi des stocks La gestion du marchandisage dans votre(vos) rayon(s) L’animation du point de...

  • Agile Transformation Expert

    5 days ago

    North East England, United Kingdom bioMérieux SA Full time

    Localisation: Durham, États-Unis Type de Contrat: Contrat à Durée Indéterminée Fonction: Marketing Entreprise familiale, bioMérieux est un acteur mondial dans le domaine du diagnostic  invitro . Depuis 60 ans, partout dans le monde, nous concevons et développons des  solutions diagnostiques innovantes pour améliorer la santé des...

  • Join our store in Hampstead, London

    Found in: Jooble UK C2 - 2 weeks ago

    South East London, United Kingdom BALIBARIS Full time

    Balibaris est une marque de prêt-à-porter masculin qui réinvente le vêtement masculin avec l'ambition de lui offrir un dressing idéal. Les collections s'affirment de saison en saison et s'unissent autour de matières nobles et d'une grande qualité de design autour d'un « lifestyle Balibaris ». Un croisement entre modernité et...

  • Join our store in Hampstead, London

    2 weeks ago

    South East London, United Kingdom BALIBARIS Full time

    Balibaris est une marque de prêt-à-porter masculin qui réinvente le vêtement masculin avec l'ambition de lui offrir un dressing idéal. Les collections s'affirment de saison en saison et s'unissent autour de matières nobles et d'une grande qualité de design autour d'un « lifestyle Balibaris ». Un croisement entre modernité et...

  • Manager - Commercial Management

    4 days ago

    Horsham, West Sussex, United Kingdom Pigier Performance Paris Full time

    Manager.euse de rayon en équipement sportif - Dole / Pontarlier Référence : Domaine : MBA Manager du Développement Commercial d'Entreprise Secteur : Commerce / Management Localisation : Dole (39) - Pontarlier (25) La gestion des commandes et le suivi des stocks La gestion du marchandisage dans votre(vos) rayon(s) L’animation du point de...

  • Comercial de Alarmes

    5 days ago

    East Midlands, United Kingdom Securitas Direct Full time

    A Securitas Direct é uma empresa multinacional, especializada na venda e monitorização de Alarmes e é Escolha do Consumidor pelo 8º ano consecutivo. Procuramos reforçar a nossa equipa **comerci** **al no concelho de Sintra**. **Responsabilidades**: - Realização de visitas comerciais; - Promoção do equipamento de segurança (alarme); -...

  • System Coordinator

    5 days ago

    East Sussex, United Kingdom Southdown Housing Association Full time

    **Lewes** **37 hours per week** **£27,978 - £30,062 per year** - Southdown’s Digital Support Team in Lewes is looking for a new System Coordinator for the Health & Safety/Compliance database. - Do you have a keen eye for data? - Are you an organised, enthusiastic self-starter who loves working with others to get the job done? - Do you have a background...

  • Audio Visual Project Manager

    4 days ago

    Mark Cross, East Sussex, United Kingdom Tech 4 Full time

    Audio Visual Project Manager Submit your CV and any additional required information after you have read this description by clicking on the application button. My client is a major visual communications group who specialise in the design, print and fulfilment of promotional marketing materials. Their aim is to innovate, progress and evolve their clients...

  • Chef de Rang

    7 days ago

    South West London, South East, United Kingdom The Peninsula London Full time

    The Peninsula London is excited to announce that we are seeking a Chef de Rang to work within our Lobby Restaurant overseeing a team of F&B Attendants and reporting to the Assistant Managers and Supervisors.Check out the role overview below If you are confident you have got the right skills and experience, apply today.The Peninsula Hotels are renowned for...

  • Chef de Partie

    Found in: Talent UK C2 - 2 days ago

    Brighton, United Kingdom Sodexo Full time

    Job Introduction We’re experience makers . And food fanatics. And we’re hiring for Chef de Partie. Our experiences are unique, and so are our people. Bring personality, your background and your desire for delighting others. In return we’ll give you all you need to thrive. Because at Sodexo Live! We’re so much more ...

  • Personal Assistant

    5 days ago

    West Sussex, United Kingdom Toc H Full time

    Job description Toc H is an old and long established charity going through a period of transformation. We are a small team developing local commnuity work and social eneterprise across the UK. You will work from home but occasionally travel to meetings across the Uk, we obviously require a good job to be done but are open to someone who needs flexibility...

  • Secondary Cover Supervisor/Unqualified Teacher

    4 days ago

    East Sussex, United Kingdom Opogo Full time

    We are currently working with a number of Secondary Schools across West London (Ealing/Westminster/Hilingdon/H&F) who are seeking Cover Supervisors/Unqualified teachers. Skills, Experience, Qualifications, If you have the right match for this opportunity, then make sure to apply today. This role offers you the opportunity to build up your experience in...

  • Chef de Partie

    21 hours ago

    Bedford, South East, United Kingdom Insight Employment Ltd Full time

    Insight Employment are recruiting for a career driven Chef de Partie on behalf of our client in Cranfield, Bedford.Make sure to apply quickly in order to maximise your chances of being considered for an interview Read the complete job description below.The Role: -As a Chef de Partie you will be working with the Sous Chef to maintain standards set by the...

  • Psychiatry - Old Age (Specialty Doctor)

    2 weeks ago

    North East England, United Kingdom Interact Medical Full time

    Job Description: Psychiatry - Old Age (Specialty Doctor) We are inviting applications for the position of Psychiatry - Old Age (Specialty Doctor). We are looking for candidates with immediate availability as Specialty Doctors specialising in Psychiatry - Old Age. This job is located in North East, starting on Tuesday 17 October 2023. This job is for a...

  • Specialty Doctor with Special Interest in Hand Trauma

    Found in: Talent UK C2 - 1 week ago

    East Grinstead, United Kingdom Queen Victoria Hospital NHS Foundation Trust Full time

    Job summary Queen Victoria NHS Foundation Trust are looking for a 10 PA Specialty Doctor with a special interest in Skin and Hand Trauma. This post has come out at a remarkable period in the service's growth, where the Specialty Doctor role will come to take on a key role in unlocking the service's potential to deliver more specialist services for...

  • Chef de Rang

    7 days ago

    Central London, South East, United Kingdom 5 Hertford Street Full time

    Chef de Rang - Loulou's Restaurant5 Hertford Streetis the beautifully appointed private member's club owned and operated by entrepreneur Robin Birley; located in the heart of Mayfair. Our aim is to be a home away from home, in the utmost comfort, where members are looked after by a team who know them by name.Apply fast, check the full description by...