1
Rassemblez des extraits audio représentatifs
Choisissez des extraits présentant les accents, les bruits de fond, le vocabulaire et les changements de locuteur que vous rencontrez réellement. Utilisez le même audio et le même format de sortie demandé pour les deux tests ; sinon, un résultat apparemment plus rapide pourrait simplement provenir d’une entrée plus facile.
2
Chronométrez l’ensemble du processus
Pour AWS Transcribe, tenez compte du téléversement ou de la configuration du flux, de la fin du traitement et de la récupération du résultat. Pour Whisper auto-hébergé, tenez compte du transfert du fichier, de l’attente dans la file, du démarrage du modèle le cas échéant, de l’inférence et de toute étape de synchronisation ou d’identification des locuteurs.
3
Arrêtez le chronomètre après la vérification
Demandez à la même personne de corriger les noms, les passages manquants et les changements de locuteur en appliquant les mêmes critères d’acceptation. Notez à la fois le délai de traitement automatique et le temps de révision : le premier résultat reçu n’est pas nécessairement le premier prêt à être publié.