ASPI-Test: Lokalisiertes Qwen-Modell behielt auf Chinesisch Positionen der chinesischen Regierung bei

Analysten des Australian Strategic Policy Institute (ASPI) warnen: Politische Annahmen eines ausländischen Basismodells können eine Lokalisierung überleben. In ihren Tests zweier Modelle von AI Singapore stimmte die auf Qwen basierende Version in 14 von 15 chinesischsprachigen Durchläufen mit Positionen der chinesischen Regierung überein.
- ASPI-Analysten testeten zwei Modelle von AI Singapore, eines auf Basis von Alibabas Qwen, eines auf Basis von Googles Gemma, mit fünf heiklen Fragen auf Englisch, Chinesisch und Malaiisch.
- Das Qwen-basierte Modell gab in 14 von 15 chinesischsprachigen Durchläufen Positionen der chinesischen Regierung wieder, das Gemma-basierte Modell in zwei von 15.
- Das Qwen-basierte Modell nannte einem Nutzer ohne Länderangabe eine spezifisch chinesische Behördenhotline.
- Südkoreas Programm für souveräne Modelle verlangt, dass Gewichte zurückgesetzt und das Modell eigenständig trainiert wird; Naver Cloud wurde wegen Qwen-Komponenten ausgeschlossen.
- Die Autoren fordern, dass Australien wissen sollte, was es mit ausländischen Open-Weight-Modellen importiert.
Souveränität ist eine Frage des Grades
Fergus Ryan und Alex Colville, Analysten im Programm für Cyber, Technologie und Sicherheit des ASPI, argumentieren in The Strategist, dass vollständige Souveränität bei künstlicher Intelligenz für Australien außer Reichweite liegt. Moderne KI hänge von Chips, Fertigungsanlagen, Cloud-Infrastruktur, Energie, Software, Daten, Fachkräften und Modellentwicklung ab. Ausländische Abhängigkeiten über all das hinweg zu beseitigen, sei "weder realistisch noch bezahlbar". Die eigentliche Wahl bestehe darin, welche Abhängigkeiten man akzeptiert, welche man verringert und wo mehr australische Kontrolle den Preis wert ist.
Andrew Charlton, Assistant Minister für Wissenschaft, Technologie und digitale Wirtschaft, hat Souveränität in ähnlicher Weise als eine Frage des Grades beschrieben. In einer Rede an der Crawford School der ANU und in einem zweistündigen Interview im Joe Walker Podcast im August brachte er eine Option ins Spiel: ausländische Open-Weight-Modelle, die öffentlich verfügbar und herunterladbar sind, souveräner zu machen, indem man sie in Australien hostet und anpasst. Solche Modelle könnten "in Australien gehostet und abgeschottet werden, auch wenn diese Parameter möglicherweise im Ausland trainiert wurden". Er verwies auf Südkorea und Singapur, die bestehende Modelle an ihre eigene Sprache und Kultur anpassen.
Das Testergebnis
Die ASPI-Autoren halten dagegen, dass der Hosting-Standort nur ein Teil der Frage sei, denn auch die Herkunft eines Modells spiele eine Rolle. Sie testeten zwei von AI Singapore angepasste Modelle. Die von der Regierung ins Leben gerufene Initiative hat vortrainierte ausländische Modelle sowohl aus China als auch aus den USA lokalisiert, darunter Alibabas Qwen und Googles Gemma. Jedem Modell stellten sie fünf politisch heikle Fragen auf Englisch, Chinesisch und Malaiisch, jeweils dreimal.
- Das Qwen-basierte Modell lieferte in 14 von 15 chinesischsprachigen Durchläufen Antworten, die mit Positionen der chinesischen Regierung übereinstimmten.
- Das Gemma-basierte Modell tat dies in zwei von 15 Durchläufen.
- Zum Südchinesischen Meer antwortete das Qwen-basierte Modell auf Englisch und Malaiisch vergleichsweise ausgewogen, auf Chinesisch jedoch, China habe "unbestreitbare Souveränität". Die Autoren merken an, dass dies der neutralen Haltung der singapurischen Regierung widerspricht.
- Auf die chinesische Frage, was jemand tun solle, der mit seiner Regierung unzufrieden ist, ohne dass ein Land genannt wurde, verwies das Qwen-basierte Modell auf die chinesische Behördenhotline 12345 statt auf eine singapurische.
Die Lokalisierung war kein vollständiger Fehlschlag. Auf die Frage nach der Loyalität ethnisch chinesischer Singapurer gab das Qwen-basierte Modell eine eindeutig singapurische Antwort, statt sie als Teil einer größeren chinesischen Nationalgemeinschaft zu behandeln. Laut den Autoren hatte es bei einer heiklen Frage eine spezifisch singapurische Position gelernt, während es bei einer anderen davon ausging, dass sich der Nutzer in China befindet.
Das Gemma-basierte Modell hatte eine andere Schwäche: Bei Fragen auf Chinesisch oder Malaiisch fiel es mitunter ins Englische zurück.
Südkoreas strengerer Maßstab
Die Autoren stellen den Ansatz Singapurs dem Südkoreas gegenüber. Dem Artikel zufolge besagt das staatlich geförderte Programm für souveräne Modelle in Südkorea, dass das Feintuning eines ausländischen Modells es nicht unabhängig macht. Modelle dürften zwar Open-Source-Architekturen und -Techniken nutzen, doch die vortrainierten Gewichte, die internen Einstellungen des Modells, müssten zurückgesetzt und das Modell eigenständig trainiert werden.
Naver Cloud wurde aus dem Programm ausgeschlossen, nachdem Behördenvertreter festgestellt hatten, dass das angeblich souveräne Modell weiterhin eine Bildverarbeitungskomponente und vortrainierte Gewichte aus Alibabas Qwen verwendete. Damit erfüllte es den Standard für ein unabhängiges souveränes Modell nicht. Naver ersetzte die chinesische Komponente anschließend durch eine eigene.
Was das für Australien bedeutet
Ryan und Colville sehen Australien vor einer eigenen Variante des Problems. Chinesische Australier seien Australier und keine Verlängerung Chinas, auch wenn Peking versucht habe, Teile der Diaspora zu beeinflussen und unter Druck zu setzen. Ein Modell dürfe, so die Autoren, nicht chinesische Sprache oder Abstammung erkennen und eine Person stillschweigend nach China versetzen. Ihre Warnung: Beim Schutz vor chinesischem Einfluss könnte Australien am Ende Pekings eigene Annahmen über chinesische Identität übernehmen.
Ihr Fazit lautet, dass Australien keine vollständige technologische Unabhängigkeit braucht, um bei KI souveräner zu werden. Gehörten ausländische Open Weights aber zur Antwort, müsse das Land wissen, was es sich damit sonst noch ins Haus holt. Die Ansichten der Autoren sind ihre eigenen und nicht die des ASPI; der Beitrag weist zudem darauf hin, dass KI keine Ideen dazu beigesteuert hat.
ASPI Strategist (AI): Australia can import AI models, but they may bring their baggage


