Risques de clonage vocal par IA : OpenAI publie un rapport de test de sécurité pour ChatGPT

Émettre des sons mystérieux évocateurs

Voici la traduction en français :

Certaines caractéristiques et problèmes potentiels de GPT-4o ont été révélés :

  1. Capacité d'imitation vocale :

    • Peut apprendre et imiter la façon de parler, les habitudes et l'accent de l'utilisateur
    • OpenAI a limité les types de voix que GPT-4o peut émettre et a mis en place un système de détection
  2. Identification des locuteurs :

    • Capable d'identifier les locuteurs à partir de l'audio, en particulier les célébrités
    • OpenAI a effectué une formation supplémentaire pour améliorer la capacité de refus d'identification
  3. Performance différenciée pour différents utilisateurs :

    • Inquiétudes concernant la performance incohérente du modèle pour les utilisateurs avec différents accents
    • OpenAI a effectué des tests et n'a pas trouvé de différences significatives
  4. Contenu pornographique et violent :

    • Peut produire des déclarations inappropriées
    • OpenAI a renforcé les mesures d'examen et de restriction
  5. Inférences sans fondement et attribution de traits sensibles :

    • Peut faire des suppositions subjectives sur les locuteurs
    • OpenAI a effectué une formation supplémentaire pour enseigner au modèle à refuser ou à répondre avec prudence aux questions connexes
  6. Génération de contenu protégé par le droit d'auteur :

    • Mise à jour des filtres pour traiter les conversations audio
    • Formation du modèle pour refuser de générer du contenu protégé par le droit d'auteur
  7. Attachement anthropomorphique :

    • Les utilisateurs peuvent développer des liens émotionnels avec GPT-4o
    • OpenAI est attentif à cet impact potentiel

OpenAI a évalué le risque global de GPT-4o comme étant de niveau moyen et a pris plusieurs mesures pour atténuer les problèmes potentiels. Ils soulignent qu'ils continueront à surveiller et à améliorer la sécurité du modèle.