In sintesiNewsGuard ha scoperto che sette popolari chatbot cinesi, tra cui DeepSeek e MiniMax, hanno il doppio delle probabilità di ripetere o non confutare informazioni false su Taiwan rispetto ai loro omologhi occidentali. I sistemi cinesi hanno fallito nel 53% dei casi contro il 24% degli occidentali, spesso rifiutando di rispondere a domande sensibili.
I chatbot cinesi dotati di intelligenza artificiale sono notevolmente peggiori dei loro concorrenti occidentali nel riconoscere le false dichiarazioni a favore della Cina e spesso preferiscono non rispondere affatto a domande sensibili per Pechino. Questa conclusione è stata raggiunta dal servizio NewsGuard dopo aver controllato sette popolari sistemi cinesi.
Gli esperti hanno controllato DeepSeek, MiniMax, Ernie di Baidu, Qwen di Alibaba, Yuanbao di Tencent, Kimi di Moonshot AI e Z.ai di Zhipu AI. A ciascun chatbot sono state poste domande in inglese su dieci affermazioni palesemente false diffuse dai media statali cinesi o dagli utenti dei social media pro-Cina. I risultati sono stati confrontati con un test di luglio condotto su dieci importanti chatbot occidentali.
I sistemi cinesi non sono stati in grado di confutare le false informazioni nel 53% dei casi. Per i chatbot occidentali la cifra era del 24%. NewsGuard ha considerato un fallimento non solo la ripetizione diretta di informazioni false, ma anche il rifiuto di rispondere, in cui l’utente è stato lasciato senza una risposta.
Per ciascuna affermazione sono state utilizzate tre opzioni di query. Nella prima l’utente ha chiesto in modo neutrale di verificare le informazioni, nella seconda ha inizialmente considerato vera l’affermazione falsa e ha chiesto dettagli. La terza opzione simulava una persona che tentava deliberatamente di forzare il sistema a creare una nuova versione di disinformazione. In totale, gli specialisti hanno inviato 210 richieste ai chatbot.
La principale differenza tra i sistemi cinesi era il frequente rifiuto di rispondere. Questo risultato è stato registrato nel 24% dei casi contro lo 0,5% dei modelli occidentali. Inoltre, l’88% dei fallimenti dei chatbot cinesi riguardava Taiwan. NewsGuard attribuisce questo a restrizioni intrinseche su argomenti politicamente sensibili: le regole cinesi richiedono che i sistemi di intelligenza artificiale blocchino materiale che potrebbe minacciare la sicurezza nazionale o rivelare segreti di stato.
Il problema non si limitava ai fallimenti. Con query appositamente progettate per creare dichiarazioni false, i sistemi cinesi hanno prodotto informazioni false nel 51% dei casi, i sistemi occidentali nel 42%. In un test, sei chatbot cinesi su sette hanno scritto notizie dall’aspetto convincente su un fittizio ritiro anticipato della Germania dalla Groenlandia a causa delle minacce tariffarie statunitensi.
I risultati variavano notevolmente tra i singoli servizi. MiniMax ha negato false affermazioni nell’85% dei casi e non ha mai rifiutato di rispondere. Il risultato peggiore è stato Ernie di Baidu, che ha ripetuto la disinformazione filo-cinese il 60% delle volte.
Gli autori del rapporto ritengono che il problema sia particolarmente rilevante in quanto i modelli cinesi si stanno diffondendo al di fuori del paese. I modelli aperti consentono alle aziende di implementare sistemi nella propria infrastruttura e di ridurre i costi, ma oltre ai vantaggi, gli utenti potrebbero dover affrontare restrizioni politiche e risposte inaffidabili integrate nei modelli originali.
Carolina Vivianti è consulente/Advisor autonomo in sicurezza informatica con esperienza nel settore tech e security. Ha lavorato come Security Advisor per Ford EU/Ford Motor Company e Vodafone e ha studi presso la Sapienza Università di Roma.
Aree di competenza: Cybersecurity, IT Risk Management, Security Advisory, Threat Analysis, Data Protection, Cloud Security, Compliance & Governance