Fluera

metacognition

Automatiseringsbias

Tendensen til å akseptere outputen fra automatiserte systemer ukritisk, særlig når den er språklig flytende. Forsterket av LLM-er, hvis artikulerte stil forveksles med nøyaktighet.

Nøkkelår
2010
Evidens
Robust konsensus
Felt
metacognition

Oversiktsarbeidet til Parasuraman og Manzey fra 2010 konsoliderte evidensen: mennesker underverifiserer outputen fra automatiserte systemer systematisk, selv når de har eksplisitte insentiver til å kontrollere den. Jo mer selvsikker overflatepresentasjonen til systemet virker, desto mindre verifisering finner sted.

LLM-er viser per design maksimal overflatekonfidens. De skriver i fullstendige setninger med høy språklig flyt. Formen på outputen er autoritetens form, og automatiseringsbias presser studenten til å akseptere det som virker autoritativt.

Fluera sin KI presenterer aldri outputen sin i autoritetens tone. Ghost Map lar usikkerheten tre fram visuelt. Sokratiske svar er formulert som prompts, ikke som forkynnelser. Den eksplisitte holdningen i produktet — verifiser før du stoler på — er en bevisst motvekt til den biasen teknologiens stil inviterer til.