Doctorant F/H Description automatisée de scènes audio explicable et frugale

2 weeks ago

Brighton East Sussex, United Kingdom Inria Full time

Doctorant F/H Description automatisée de scènes audio explicable et frugale
Inria Défense&Sécurité (Inria D&S) a été créé en 2020 pour fédérer les actions d’Inria répondant aux besoins numériques des forces armées et forces de l’intérieur. La thèse sera réalisée au sein de l’équipe de recherche en traitement de l’audio de Inria D&S, sous la direction de Jean-François Bonastre et co-encadrée par Raphaël Duroselle.
La description automatisée de scènes audio consiste à présenter aux opérateurs un condensé des informations présentes dans la scène en question, sous la forme d’un texte augmenté. Ce condensé permet de faire ressortir de façon synthétique et visuelle les informations les plus importantes, tout en structurant efficacement l’accès aux informations précises. Pour illustrer ce point, un condensé pourrait prendre la forme suivante: «Dans cet enregistrement d’une durée de cinq minutes, trois locuteurs différents sont présents. Le locuteur A correspond à une identité connue dans la base de données et s’exprime en Français avec un fort accent du Monawa, les locuteurs B et C sont inconnus dans la base de données et s’expriment en Français dans leurs interactions avec A et dans une langue non identifiée lorsqu’ils parlent ensemble. Les voix de B et C présentent de fortes similitudes avec les locuteurs de la région du Quabar oriental. Le thème général de l’enregistrement concerne un transfert de marchandises entre les villes de Orienta et de Flagrance.La date du 8 Juillet 2023 est citée à trois reprises ». En cliquant sur A, l’opérateur disposera des informations sur A et sur les détails de l’identification vocale réalisée. L’accès aux segments temporels pendant lesquels A a parlé et à la transcription de ceux-ci sera direct. Dans cette transcription, les noms de personnes, de lieux ou les dates (les entités nommées) seront mises en évidence.
La thèse vise à proposer un cadre général pour le traitement des enregistrements audio dans le cadre du renseignement. Elle consiste à définir une application de haut niveau adaptée aux besoins des utilisateurs finaux promouvant la présentation d’un enregistrement sous la forme d’un rapport synthétique pour mettre en évidence les points saillants.
L’approche visée s’inspire à la fois de la description textuelle de scènes vidéo [1] et sur les systèmes de dialogue reposant sur des scènes audio-visuelle [2]. Le système reposera sur l’extraction de représentations du signal de parole à différentes échelles (trame, segment de parole ou événement sonore, enregistrement complet), éventuellement dédiées à des tâches différentes. Les représentations, utiles aux différentes briques technologiques du système seront des embeddings extraits de réseaux de neurones profonds, génériques [3] ou dédiés à chaque tâche. La fusion entre les différents niveaux d’information pourra être réalisée avec une architecture s’inspirant du schéma «Encodeur-Decodeur» multi-stream [4], avec plusieurs encodeurs produisant des séquences de représentations et un ou plusieurs décodeurs réalisant les tâches ou sous-tâches nécessaires au système. Un de ces décodeurs produira un descriptif textuel de la scène.
Des directions de recherche potentielles, visant à dépasser un système de description de scènes audio par assemblage de briques existantes, pourront être discutées et affinées avec le candidat.
Etat de l’art, constitution d’un système de description de scènes audio par assemblage des outils existants;
Définition de la tâche, élaboration d’un corpus et d’un protocole d’évaluation;
Travail sur l’alignement entre des représentations auto-supervisées du signal de parole et des grands modèles de langage;
Entraînement faiblement supervisé du système;
Evaluation des systèmes et confiance dans les prédictions.
Master 2 ou diplôme d’école d’ingénieur en informatique, mathématiques appliquées ou phonétique,
Intérêt marqué pour la recherche appliquée,
Maîtrise de l’anglais parlé et écrit,
Connaissances en traitement du signal,
Connaissances en apprentissage automatique de manière générale et dans les approches neuronales (deep learning) en particulier,
Connaissance pratique d’outils comme Pytorch, Keras ou Scikit-learn,
Expérience en traitement automatique de la parole, dont la connaissance de plateformes open-source comme Kaldi ou Speechbrain.
Références
Restauration subventionnée,
Transports publics remboursés partiellement,
Congés: 7 semaines de congés annuels + 10 jours de RTT (base temps plein) + possibilité d'autorisations d'absence exceptionnelle (ex : enfants malades, déménagement),
Possibilité de télétravail (2 jours par semaine) et aménagement du temps de travail,
Équipements professionnels à disposition (visioconférence, prêts de matériels informatiques, etc.),
Prestations sociales, culturelles et sportives (Association de gestion des œuvres sociales d'Inria),
Nous vous remercions d'adresser un CV accompagné d'une lettre de motivation.
#J-18808-Ljbffr

  • Doctorant F/H Description automatisée de scènes audio explicable et frugale

    2 months ago

    Brighton, East Sussex, United Kingdom Inria Full time

    Doctorant F/H Description automatisée de scènes audio explicable et frugale Inria Défense&Sécurité (Inria D&S) a été créé en 2020 pour fédérer les actions d’Inria répondant aux besoins numériques des forces armées et forces de l’intérieur. La thèse sera réalisée au sein de l’équipe de recherche en traitement de l’audio de Inria...

  • Doctorant F/H Description automatisée de scènes audio explicable et frugale

    2 weeks ago

    Brighton, East Sussex, United Kingdom Inria Full time

    Doctorant F/H Description automatisée de scènes audio explicable et frugale Inria Défense&Sécurité (Inria D&S) a été créé en 2020 pour fédérer les actions d’Inria répondant aux besoins numériques des forces armées et forces de l’intérieur. La thèse sera réalisée au sein de l’équipe de recherche en traitement de l’audio de Inria...

  • Doctorant F/H Description automatisée de scènes audio explicable et frugale

    2 months ago

    Brighton, East Sussex, United Kingdom Inria Full time

    Doctorant F/H Description automatisée de scènes audio explicable et frugale Inria Défense&Sécurité (Inria D&S) a été créé en 2020 pour fédérer les actions d’Inria répondant aux besoins numériques des forces armées et forces de l’intérieur. La thèse sera réalisée au sein de l’équipe de recherche en traitement de l’audio de Inria...

  • Doctorant F/H Description automatisée de scènes audio explicable et frugale

    2 weeks ago

    Brighton, East Sussex, United Kingdom Inria Full time

    Doctorant F/H Description automatisée de scènes audio explicable et frugale Inria Défense&Sécurité (Inria D&S) a été créé en 2020 pour fédérer les actions d’Inria répondant aux besoins numériques des forces armées et forces de l’intérieur. La thèse sera réalisée au sein de l’équipe de recherche en traitement de l’audio de Inria...

  • Doctorant F/H Description automatisée de scènes audio explicable et frugale

    2 weeks ago

    Brighton, East Sussex, United Kingdom Inria Full time

    Doctorant F/H Description automatisée de scènes audio explicable et frugale Inria Défense&Sécurité (Inria D&S) a été créé en 2020 pour fédérer les actions d’Inria répondant aux besoins numériques des forces armées et forces de l’intérieur. La thèse sera réalisée au sein de l’équipe de recherche en traitement de l’audio de Inria...

  • Doctorant F/H Description automatisée de scènes audio explicable et frugale

    2 weeks ago

    Brighton, East Sussex, United Kingdom Inria Full time

    Doctorant F/H Description automatisée de scènes audio explicable et frugale Inria Défense&Sécurité (Inria D&S) a été créé en 2020 pour fédérer les actions d’Inria répondant aux besoins numériques des forces armées et forces de l’intérieur. La thèse sera réalisée au sein de l’équipe de recherche en traitement de l’audio de Inria...

  • Doctorant F/H Description automatisée de scènes audio explicable et frugale

    2 weeks ago

    Brighton, United Kingdom Inria Full time

    Doctorant F/H Description automatisée de scènes audio explicable et frugale Inria Défense&Sécurité (Inria D&S) a été créé en 2020 pour fédérer les actions d’Inria répondant aux besoins numériques des forces armées et forces de l’intérieur. La thèse sera réalisée au sein de l’équipe de recherche en traitement de l’audio de Inria...

  • Technicien de maintenance itinérant H/F

    4 weeks ago

    Darvel, East Ayrshire, United Kingdom ARTIS DEVELOPPEMENT Full time

    Expérience : 1-2 ans Niveau d´étude : Niveau Bac / Bac / Bac + 1 Permis demandé : B Salaire : De 22000 € à 26000 € /an Niveau de qualification : Technicien Dans le cadre du poste qui vous est proposé, vous serez amenés à :  Réaliser la maintenance préventive et curative : diagnostiquer les pannes / réaliser opérations de maintenance /...

  • Assistant en communication et marketing digital

    1 month ago

    Horsham, West Sussex, United Kingdom EST'M Full time

    Nos écoles ESTM PIGIER à Besançon recrutent pour l’une de nos entreprises partenaires sur le secteur de Dole, un(e) Assistant(e) en communication et marketing en alternance dans le cadre de la préparation du BAC+5 Manager de la Communication et du Marketing Digital. Vos missions : -Communication digitale – Réseaux sociaux (animation, drive to...

  • Customer Service Operations

    1 month ago

    North East England, United Kingdom bioMérieux SA Full time

    Cette offre d'emploi n'est plus active. Localisation: Durham, États-Unis Type de Contrat: Contrat à Durée Indéterminée Fonction: Service Client Entreprise familiale, bioMérieux est un acteur mondial dans le domaine du diagnostic  invitro . Depuis 60 ans, partout dans le monde, nous concevons et développons des  solutions diagnostiques...

  • Chef de Partie

    2 weeks ago

    Brighton, United Kingdom Appcastenterprise Full time

    **What we’ll give**: We ensure you're rewarded for all your hard work, which is why we offer a comprehensive benefits package which includes but is not limited to: - Contributory pension scheme - Grow your career with our Career Pathways and MyLearning programmes - Save money on your food shop with discounts on Tesco, Sainsbury's, Morrisons and many...

  • Chef de Partie

    2 weeks ago

    South West London, South East, United Kingdom H & C Solutions Full time

    Job Title: Chef de PartieApply fast, check the full description by scrolling below to find out the full requirements for this role.H&C Solutions are excited to offer this fantastic Chef de Partie position role to work within one of London's most luxurious five starred hotels. The restaurant's passion lies in sourcing the freshest organic produce for the...

  • Chef de Partie Pastry

    2 weeks ago

    South West London, South East, United Kingdom H & C Solutions Full time

    Job Title: Chef de Partie PastryCheck all associated application documentation thoroughly before clicking on the apply button at the bottom of this description.H&C Solutions is thrilled to present the chance to work in the role of Chef de Partie Pastry at one of London's most luxurious five-star hotels. The restaurant prides itself on procuring the freshest...

  • Chef de Partie Pastry

    2 weeks ago

    South West London, South East, United Kingdom H & C Solutions Full time

    Job Title: Chef de Partie PastryCheck all associated application documentation thoroughly before clicking on the apply button at the bottom of this description.H&C Solutions is thrilled to present the chance to work in the role of Chef de Partie Pastry at one of London's most luxurious five-star hotels. The restaurant prides itself on procuring the freshest...

  • Demi Chef de Partie

    2 weeks ago

    South West London, South East, United Kingdom H & C Solutions Full time

    Job Title: Demi Chef de PartieApply fast, check the full description by scrolling below to find out the full requirements for this role.H&C Solutions are excited to offer this fantastic Demi Chef de Partie position role to work within one of London's most luxurious five starred hotels. The restaurant's passion lies in sourcing the freshest organic produce...

  • Pastry Chef de Partie

    2 weeks ago

    South West London, South East, United Kingdom H & C Solutions Full time

    Job Title: Pastry Chef de PartieApply fast, check the full description by scrolling below to find out the full requirements for this role.H&C Solutions is delighted to offer the opportunity to work as a Pastry Chef de Partie position at one of London's most opulent five-star hotels. The restaurant's passion lies in sourcing the freshest organic produce for...

  • Chef de Partie Larder

    2 weeks ago

    South East London, United Kingdom H & C Solutions Full time

    Job Title: Chef de Partie LarderApply fast, check the full description by scrolling below to find out the full requirements for this role.H&C Solutions are proudly recruiting for an exclusive neighbourhood restaurant and cocktail bar near to St Katherines Dock (E1). The restaurant oozes style and elegance. Every fixture/furniture within the restaurant, bar...

  • Chef de Partie Larder

    2 weeks ago

    South East London, United Kingdom H & C Solutions Full time

    Job Title: Chef de Partie LarderApply fast, check the full description by scrolling below to find out the full requirements for this role.H&C Solutions are proudly recruiting for an exclusive neighbourhood restaurant and cocktail bar near to St Katherines Dock (E1). The restaurant oozes style and elegance. Every fixture/furniture within the restaurant, bar...

  • Ecologist (H&H Land & Estates)

    2 weeks ago

    North East, United Kingdom H&H Land & Estates Full time

    H&H Land & Estates is part of the H&H Group and is one of the leading Chartered Surveyors, Land Agents, Environment & Forestry advisors in the North of England and Southern Scotland. We have an exciting opportunity for an experienced Ecologist to join our expanding team.  Based in our Carlisle office, we can offer some flexibility with regard to our other...

  • Chef de Partie

    2 weeks ago

    South West London, South East, United Kingdom H & C Solutions Full time

    Job Title: Chef de Partie Apply fast, check the full description by scrolling below to find out the full requirements for this role.H&C Solutions is excited to announce a partnership with a five-star luxury hotel in the heart of Mayfair. This hotel kitchen is overseen by a very charismatic Executive Head Chef who is known for spending lots of quality time...