I ricercatori hanno testato centinaia di domande in lingue e formati di risposta diversi. I prompt in cinese semplificato hanno prodotto più risposte favorevoli al governo nella maggior parte dei modelli, mentre anche alcuni modelli non cinesi hanno talvolta ripreso posizioni ufficiali. Le tendenze politiche erano più difficili da rilevare in compiti lavorativi realistici.

Vals ha riferito che un fine-tuning mirato ha ridotto questo tipo di risposte per Thomson 1.0 Small, dall’84,6% del suo modello di base Qwen3.6 35B al 15,0%. L’azienda afferma che le sue domande non sono prompt tipici degli utenti; i rifiuti sono stati conteggiati come neutrali e alcuni modelli sono stati utilizzati tramite fornitori terzi. Questi limiti sono importanti per interpretare i risultati.

Perché è importante

Il comportamento dei modelli può dipendere dalla lingua e dal contesto, e il punteggio di allineamento dello studio non misura la veridicità.

GUIDE

Qualcosa da provare

Se confronti i modelli, prova a porre una domanda sensibile in più di una lingua e a confrontare le risposte aperte.