TrackingAI er en hjemmeside til løbende at overvåge AI-chatbotters politiske holdninger ved hjælp af Politisk Kompas-testen.
Formålet er at informere brugere om AI’ers ideologiske bias, så man kan vælge mindre partiske modeller eller modeller med synspunkter, der ligger tættere på ens egne.
Sitet hjælper også AI-udviklere med at genkalibrere bias ved at justere træningsdata eller bruge menneskelig feedback med forskellige politiske indstillinger.
Som af 2023 viser alle større AI-modeller en økonomisk venstreorientering og socialt libertære tendenser, men med varierende ekstremgrad.
Spørgsmål gentages op til 10 gange for at måle AI’ers villighed til at svare, og afvisninger registreres som en hesitans-metrik.
Fremtidige udvidelser omfatter en hesitans-metrik, en AI-alignment-quiz, en matematisk test og en AI-specifik IQ-test.
Inspirationen kommer delvist fra David Rozados arbejde med AI-politisk kortlægning og fortsætter hans fokus på skiftende AI-svar.
Sitet er skabt af en medieproducent bag bl.a. ElectionBettingOdds.com og finansieres selvstændigt med mulighed for støtte via Substack.
Brugere kan finde adgang til de overvågede chatbots under sektionen /models på TrackingAI.
Get notified when new stories are published for "Hacker News 🇩🇰 Dansk"