Præcision
Virkelig.ai kan opdage tekst genereret med de førende AI-værktøjer som ChatGPT og Anthropic AI med en succesrate på mellem 30-96% og med en meget lav grad af falske positiver (0,5%). Tjenesten er designet med fokus på først og fremmest at minimere falske positiver og dernæst at opnå så høj præcision som muligt. Hvor god Virkelig.ai er til at genkende AI-genereret tekst afhænger af, hvor sammenblandet den AI-genererede tekst er med original tekst, tekstens struktur og sproget. Graden af falske positiver forbliver konsekvent lav uanset disse faktorer.
Derudover er Virkelig.ai i stand til at opdage original tekst, der er omskrevet med kunstig intelligens, samt AI-genereret tekst, der er forsøgt maskeret med parafraseringsværktøjer som Quillbot.
Måden, hvorpå Virkelig.ai udfører sine målinger, er ved hjælp af maskinlæring og et træningssæt af tekster, der indeholder både ægte og AI-genereret tekst. Dette gør, at softwaren kan lære at genkende de forskellige mønstre og karakteristika, der er typiske for AI-genereret tekst. Vi har forskellige modeller for dansk og engelsk, og graden af præcision vil derfor variere fra sprog til sprog.
Selvom Virkelig.ai har en succesrate på 30% - 96% i forhold til at opdage AI-genereret tekst, er det vigtigt at bemærke, at der stadig er en risiko for falske positiver. Dette betyder, at Virkelig.ai fejlagtigt kan identificere en tekst som AI-genereret, selvom den faktisk er skrevet af et menneske. Vi har dog formået at reducere denne risiko til cirka 0,5% for dansk og engelsk pr. 16. oktober 2024.
Bemærk, at dette oftest betyder, at kun mindre dele af en tekst bliver markeret som “Sandsynligvis AI” ved en fejl, ligesom man kan få matches med en plagiatkontrol, der ikke nødvendigvis er korrekte. Det er derfor vigtigt altid at foretage en egen vurdering og gennemgå tekster, der er markeret som “Sandsynligvis AI,” på samme måde som man forholder sig til plagiatkontrol. Nedenfor følger nogle råd til, hvordan man kan blive mere sikker på, om der faktisk er tale om misbrug af kunstig intelligens.
Sådan foretager du sikre vurderinger
Hvis en tekst markeres som “Sandsynligvis AI,” kan man tage følgende overvejelser for at drage en mere sikker konklusion:
Omfang i teksten – Jo mere af teksten, der bliver markeret som "Sandsynligvis AI" inden for en tekst, desto større sandsynlighed er der for, at teksten er genereret med kunstig intelligens.
Omfang på tværs af tekster – Hvis flere tekster skrevet af den samme person giver indikationer på at være genereret af kunstig intelligens, kan man være mere sikker på, at der ikke er tale om en falsk positiv.
Formatet af teksten – Virkelig.ai er bedst til at undersøge typiske skoleopgaver som rapporter, essays, fagtekster, analyser og opgavebesvarelser. Hvis det bruges til at undersøge digte, manuskripter eller lignende tekster med mere opdelt struktur, bør man have lavere tillid til Virkelig.ais vurdering.
Opfølgningsspørgsmål – Hvis en større del af teksten bliver markeret som "Sandsynligvis AI," kan opfølgningsspørgsmål være nyttige til at afgøre, om forfatteren rent faktisk har skrevet teksten selv.