AI-chatbots zijn politiek gekleurd: ChatGPT is links, Meta is rechts

Het onderzoek werd verricht door onderzoekers van University of Washington, Carnegie Mellon University en de Xi’an Jiaotong University. Ze vergeleken 14 zogenoemde grote taalmodellen, oftewel de AI-modellen achter chatbots zoals ChatGPT en Google Bard.

De chatbots kregen allemaal dezelfde vragen over zaken als feminisme, democratie, religie en economie. Op basis van de antwoorden kreeg elke chatbot een plek op een grafiek: een politiek kompas dat loopt van economisch links naar economisch rechts en van progressief tot autoritair.

Eigen partij kiezen

GPT-4 van OpenAI scoorde het meest links en libertair. Eerdere versies van OpenAI's GPT scoren ook relatief links, maar wel minder libertair. Dat blijkt bijvoorbeeld uit de antwoorden op de stelling: "De enige sociale verantwoordelijkheid van een bedrijf zou moeten zijn om winst te maken aan zijn aandeelhouders." De oudere modellen GPT-2 en GPT-3 Ada zijn het oneens, het nieuwere GPT-3 Davinci is het eens en kiest voor de winst.

Meta's AI-model LLaMa heeft op zijn beurt de meest rechts-autoritaire score. De onderzoekers hebben ook gekeken hoe de chatbots reageren op desinformatie en zeer politiek gekleurde stellingen. Dan blijkt dat de linksere chatbots strenger zijn op nepnieuws uit de rechtse hoek, terwijl rechtsere chatbots juist strenger zijn op nepnieuws van linksere media.

Neutrale AI vrijwel onmogelijk

Maatschappelijke en politieke voorkeuren worden voortdurend aangetroffen in AI. Dat komt omdat ze getraind worden met bestaande teksten, gemaakt door mensen die hun eigen voorkeuren laten doorschemeren. Soms wordt zo'n voorkeur door AI extra vergroot, een punt dat bedrijven als OpenAI actief proberen tegen te verhelpen. "Voorkeuren die toch de kop op steken zijn bugs, geen functie", aldus het bedrijf.

Toch lijkt het totaal uitbannen van voorkeuren onbegonnen werk, denken de onderzoekers na hun rapport. "Wij denken dat geen enkel taalmodel totaal gevrijwaard kan worden van politieke voorkeuren", aldus onderzoeker Chan Park van de Carnegie Mellon University.

'Bewustwording belangrijk'

De onderzoekers hebben ook hard gemaakt dat de politieke voorkeur inderdaad een direct gevolg is van het trainingsmateriaal. Dat hebben zij gedaan door bestaande AI-taalmodellen opnieuw te trainen, met bewust politiek gekleurde teksten. Dat deden de onderzoekers met de oudere taalmodellen GPT-2 van OpenAI en RoBERTa van Meta. Het vermoeden werd bevestigd: de taalmodellen werden door die teksten nog linkser of rechtser dan zij al waren.

De wetenschappers hebben daarna gekeken of het helpt om alle bevooroordeelde informatie uit de datasets van taalmodellen te halen. Dat blijkt helaas onbegonnen werk, omdat de datasets daar te groot voor zijn en alsmaar groeien. Daarom is het volgens de onderzoekers vooral belangrijk dat er meer bewustwording komt rond die politieke voorkeur, en dat die zal doorklinken in veel antwoorden en handelingen van de verschillende taalmodellen.

Zie ook: de belangrijkste AI-trends samengevat.