KI-Text-Detektion durch Pangram: Sprachmodelle verraten sich durch uniforme Argumente

Wenn du willst, dass Pangram deine KI-Texte nicht erkennt, brauchst du kreativere Argumente. Das legt ein Interview mit Max Spero nahe, dem CEO des KI-Text-Detektors Pangram, das auf AI Policy Perspectives erschienen ist.

Spero sagt, sein Deep-Learning-Klassifikator sei eine Blackbox: Warum das Modell einen Text als KI-generiert einstufe, lasse sich nicht im Detail erklären. Pangram zeige Nutzern zwar auffällige Formulierungen als Indizien an, doch das Modell selbst achte auf Muster in längeren Textpassagen, die ein Sprachmodell beim Strukturieren eines Dokuments hinterlasse. Welche genau das sind, weiß auch Pangram nicht.

Laut Spero schreiben Sprachmodelle möglicherweise besser als durchschnittliche menschliche Schreiber, etwa bei Grammatik und Argumentationslogik. Sie seien aber deutlich uniformer: Bitte man ein Sprachmodell um 100 Argumente zu einem Thema, gruppierten sich diese in einem engen Bereich. Menschliche Argumente seien dagegen vielfältiger; das könne KI nicht nachbilden.