Precision

Verklig.ai kan upptäcka text genererad med de ledande AI-verktygen ChatGPT, GPT-4 och tidigare GPT-versioner med en framgångsgrad på mellan 30-96%, och med en mycket låg grad av falska positiva (0,5%). Tjänsten är skapad med tanken att först och främst minimera falska positiva och därefter ha så hög precision som möjligt. Hur bra Verklig.ai är på att känna igen AI-genererad text beror på hur blandad den AI-genererade texten är med originaltext, textens struktur och språk. Graden av falska positiva förblir stadigt låg oavsett dessa faktorer.

Dessutom kan Verklig.ai upptäcka originaltext som har omskrivits med hjälp av artificiell intelligens och AI-genererad text som har försökts maskeras med omformuleringsverktyg som Quillbot.

Sättet Verklig.ai utför mätningarna på är genom maskininlärning och en träningssats med texter som innehåller både äkta och AI-genererad text. Detta gör att programvaran kan lära sig att känna igen de olika mönstren och karaktäristika som är typiska för AI-genererad text. Vi har olika modeller för svenska och engelska och precisionen kommer därför att variera från språk till språk.

Även om Verklig.ai har en framgångsgrad på 30% - 96% när det gäller att upptäcka AI-genererad text, är det viktigt att notera att det fortfarande kan finnas en risk för falska positiva. Detta innebär att det är möjligt att Verklig.ai felaktigt kan identifiera en text som AI-genererad när den faktiskt är skriven av en människa. Vi har lyckats minska detta till cirka 0,5% för svenska och engelska per den 16.10.2024.

Observera att detta oftast betyder att endast mindre delar av en text felaktigt markeras som "Troligtvis AI", på samma sätt som man kan få träffar med en plagiatkontroll som inte nödvändigtvis stämmer. Det är därför viktigt att alltid göra en egen bedömning och granska text som är markerad som "Troligtvis AI", på samma sätt som man förhåller sig till plagiatkontroll. Nedan följer några råd för hur man kan bli säkrare på att det faktiskt är missbruk av artificiell intelligens som har upptäckts.

Hur man gör säkra bedömningar

Om texten markeras som "Troligtvis AI" kan man göra följande bedömningar för att komma till en säkrare slutsats:

  • Omfattning i texten - Ju mer text som markeras som Kanske AI inom en text, desto större sannolikhet är det att texten är genererad med artificiell intelligens.

  • Omfattning över texter - Om flera texter skrivna av samma person ger utslag för att de kan vara skrivna av artificiell intelligens, desto säkrare kan man vara på att det inte är en falsk positiv.

  • Formatet på texten - Verklig.ai är bäst på att undersöka typiska skoluppgifter såsom rapporter, essäer, facktexter, analyser och uppgiftssvar. Om det används för att undersöka dikter, manus eller liknande typer av texter med mer uppstyckad struktur bör man ha lägre tillit till Verklig.ais bedömning.

  • Uppföljningsfrågor - Ju mer text som markeras som Kanske AI inom en text, desto större sannolikhet är det att texten är genererad med artificiell intelligens.