ChatGPT eller menneskelig tekst? Her er en overraskende måte å se forskjellen på

Det er noen viktige forskjeller mellom AI-generert tekst og menneskeskrevet tekst. Men denne kan lære mennesker en ting eller to.

ChatGPTs evne til å komponere en artikkel i løpet av sekunder har skapt bekymring for fremtidens utdanning. Det har aldri vært enklere å jukse. Problemer med AI-chatboten har skapt etterspørsel etter AI-genererte tekstdetektorer. En ny studie viser imidlertid at det er noen nøkkelegenskaper som kan hjelpe til med å skille mellom tekst laget av ChatGPT og tekst skrevet av mennesker.

For studien bygde forskere en maskinlæringsmodell som så etter mønstre og egenskaper i ChatGPT-svar som kunne hjelpe til med å skille dem fra menneskeskapt tekst. To eksperimenter fikk ChatGPT til å generere restaurantanmeldelser og fikk den også til å omformulere de originale menneskeskapte tekstanmeldelsene, ifølge studien.

Observasjonene viste at ChatGPT beskriver opplevelser i stedet for å dele følelser. Den unngår personlige pronomen, bruker noen uvanlige ord og, interessant nok, bruker den aldri aggressivt eller frekt språk. For eksempel brukte den det noe atypiske ordet «uoppmerksom», i tillegg til å overdrive språk som «helt deilig» og «altfor høflig».

Studiens resultater indikerer at ChatGPTs skrivestil er ekstremt høflig. Og i motsetning til mennesker, kan den ikke produsere svar som inkluderer metaforer, ironi eller sarkasme. Betyr det at den sanne forskjellen mellom kunstig og menneskelig intelligens er vår uhøflighet?

"Det er ekstremt høflig, og tar sikte på å tilfredsstille forskjellige typer forespørsler fra forskjellige domener som ganske godt etterligner mennesker, men det har fortsatt ikke dypheten til menneskelig språk (f.eks. ironi, metaforer,...)," sa studiens forfattere.

Andre indikatorer på ChatGPT skrevet tekst inkluderte mangel på detaljer. For eksempel, i anmeldelsene brukte ChatGPT generell informasjon den visste om restauranter i stedet for å beskrive restaurantspesifikasjoner som et menneske som spiste på en restaurant ville inkludere. Studien fant også at ChatGPT gjentok seg mye, og brukte hele tiden ordet "restaurant" i teksten.

Hvis du prøver å skille mellom menneskelig eller ChatGPT-skrevet tekst, kan det være best å se etter disse egenskapene. AI-genererte tekstgjenkjenningsverktøy finnes, men ingen av dem fungerer på langt nær så nøyaktig som nødvendig.

Onsdag lanserte OpenAI, forskningsselskapet bak ChatGPT, et gratis ChatGPT-verktøy for tekstidentifisering; verktøyet kan imidlertid ikke stole på. OpenAIs "klassifiserer"-verktøy kan bare identifisere 26 % av AI-skrevet tekst med en "sannsynlig AI-skrevet" betegnelse og gir falske positiver 9 % av tiden.

ZDNET testet andre AI-tekstdeteksjonsverktøy, inkludert GPT-2 Output Detector, Writer AI Content Detector og Content at Scale AI Content Detection. Resultatene viste at disse verktøyene også var upålitelige.