Files
LiveFlow/task.md
T

2.2 KiB

LiveFlow — Diarisation des locuteurs

Context

LiveFlow est une application de transcription de réunions en temps réel. Nous y ajoutons la diarisation (identification automatique des locuteurs) via SpeechBrain ECAPA-TDNN et un clustering incrémental, ainsi qu'un sélecteur de microphone dans l'interface utilisateur.

Current Focus

Vérification de la cohérence de tous les fichiers (backend et frontend) et tests d'intégration/fonctionnalité.

Master Plan

  • Créer app/diarizer.py — module SpeakerDiarizer (embeddings + clustering)
  • Modifier app/segmenter.py — ajouter le champ speaker à la dataclass Segment
  • Modifier app/main.py — intégrer la diarisation dans le worker, le schéma de base de données, l'API et les exports
  • Modifier app/static/app.js — affichage des badges locuteurs, toggle, copie et intégration du sélecteur de micro
  • Modifier app/static/index.html — toggle diarisation et sélecteur de micro dans les contrôles
  • Modifier app/static/style.css — styles pour les badges locuteurs, le toggle et le sélecteur de micro
  • Modifier app/requirements.txt — ajouter speechbrain, torch, torchaudio
  • Modifier app/Dockerfile — installer PyTorch CPU-only
  • Modifier .env.example — variables DIARIZATION et DIARIZATION_THRESHOLD
  • Modifier docker-compose.yml — passer les variables d'environnement de diarisation
  • Vérification de la cohérence de tous les fichiers et validation
  • Correction de tout bug ou problème détecté

Progress Log

  • Création du module diarizer.py pour l'extraction des embeddings et le clustering.
  • Modification de segmenter.py pour stocker le locuteur.
  • Mise à jour de main.py pour la gestion de la session de diarisation, l'API et la persistance en base de données.
  • Développement du frontend (styles, boutons, sélecteur de micro, badges).
  • Validation et commit des modifications pour le sélecteur de micro et la diarisation.
  • Amélioration du frontend pour rafraîchir les noms des micros après autorisation d'accès, commit et push sur main.
  • Correction de l'affichage de la liste des micros : demande initiale d'autorisation au chargement de la page et filtrage des périphériques sans identifiant.