AI-Stimmklonen-Risiken: OpenAI veröffentlicht Sicherheitstestbericht für ChatGPT

Mysteriöse Geräusche aussenden, die die Fantasie anregen

GPT-4o's einige Eigenschaften und potenzielle Probleme wurden aufgedeckt:

  1. Fähigkeit zur Stimmimitation:

    • Kann die Sprechweise, Gewohnheiten und Akzente der Benutzer erlernen und nachahmen
    • OpenAI hat die Arten von Stimmen, die GPT-4o erzeugen kann, eingeschränkt und ein Erkennungssystem eingerichtet
  2. Sprechererkennung:

    • Kann Sprecher anhand von Audioaufnahmen identifizieren, insbesondere Prominente
    • OpenAI hat ein Nachtraining durchgeführt, um die Fähigkeit zur Ablehnung der Erkennung zu verbessern
  3. Unterschiedliche Leistung für verschiedene Benutzer:

    • Bedenken hinsichtlich inkonsistenter Leistung des Modells für Benutzer mit unterschiedlichen Akzenten
    • OpenAI hat Tests durchgeführt und keine signifikanten Unterschiede festgestellt
  4. Pornografische und gewalttätige Inhalte:

    • Mögliche Erzeugung unangemessener Äußerungen
    • OpenAI hat Überprüfungs- und Beschränkungsmaßnahmen verstärkt
  5. Unbegründete Schlussfolgerungen und Zuschreibung sensibler Eigenschaften:

    • Mögliche subjektive Vermutungen über Sprecher
    • OpenAI hat ein Nachtraining durchgeführt, um das Modell anzuweisen, solche Fragen abzulehnen oder vorsichtig zu beantworten
  6. Generierung urheberrechtlich geschützter Inhalte:

    • Aktualisierte Filter zur Behandlung von Audio-Dialogen
    • Training des Modells zur Ablehnung der Generierung urheberrechtlich geschützter Inhalte
  7. Vermenschlichende Bindung:

    • Benutzer könnten emotionale Verbindungen zu GPT-4o entwickeln
    • OpenAI ist sich dieser potenziellen Auswirkung bewusst

OpenAI bewertet das Gesamtrisiko von GPT-4o als moderat und hat mehrere Maßnahmen ergriffen, um potenzielle Probleme zu mindern. Sie betonen, dass sie die Sicherheit des Modells weiterhin überwachen und verbessern werden.