Identifiera användning av ChatGPT i studenters arbete: Introduktion av GPTZero

Identifiera användning av ChatGPT i studenters arbete: Introduktion av GPTZero

När det gäller världsförändrande teknologier har ChatGPT verkligen gjort en enorm inverkan på hur människor tänker på att skriva och koda under den korta tid som det har varit tillgängligt.

Denna förmåga har dock kommit med en betydande nackdel, särskilt inom utbildning, där studenter frestas att använda ChatGPT för sina egna uppsatser eller prov. Det märket av plagiat hindrar elever från att lära sig så mycket de kunde och har gett lärare en helt ny huvudvärk: hur man upptäcker AI-användning.

Lärare och andra användare letar nu efter sätt att upptäcka användningen av ChatGPT i elevernas arbete, och många vänder sig till verktyg som GPTZero, ett ChatGPT-detektionsverktyg byggt av Princeton University-studenten Edward Tian. Mjukvaran är tillgänglig för alla, så om du vill prova den och se chansen att ett visst stycke text skrevs med ChatGPT, så här kan du göra det.

Vad är GPTZero?

GPTZero är en webbapp och tjänst utformad för att upptäcka om en text har skrivits av en människa eller av en artificiell intelligens. För närvarande kan systemet skenbart upptäcka utdata från en mängd stora språkmodeller inklusive ChatGPT, GPT-4 och Claude, såväl som om det skrevs av en människa i samarbete med en AI.

Den utvecklades och släpptes ursprungligen i januari 2023 av Edward Tian, ​​en 22-årig kandidat som studerar datavetenskap vid Princeton University och en tidigare praktikant inom mjukvaruteknik på Microsoft. Medan han tillkännagav plattformen på X (tidigare Twitter), noterade Tian att analysen baserades på forskningen från Princeton Ph.D. kandidat Sreejan Kumar, och arbetet i Princetons Natural Language Processing Group.

analysen bygger på viss pågående forskning med och @sreejan_kumar och @princeton_nlp. förhoppningsvis publicerar vi något empiriskt snart. men under tiden var det här en rolig app att göra 🙂

— Edward Tian (@edward_the6) 3 januari 2023

Är GPTZero gratis?

GPTZero designades för lärare, men alla kan använda det gratis. Med ett gratis konto kan du skanna 40 dokument per timme och komma åt GPTZero-instrumentpanelen. $10/månad Essential-planen kommer att skanna upp till 150 000 ord per månad och ge tillgång till ”premium” AI-detektionsmodeller såväl som ”plagiatskanning” och ”Avancerad grammatik och skrivning”. Premiumpaketet på $16/månad ökar ordantalet till 300 000 per månad och erbjuder en ”Advanced AI Deep Scan” och flerspråkig AI-detektering utöver fördelarna på Pro-nivå. Den professionella prenumerationen på 16 USD/månad på toppnivå delar ut 500 000 ord per månad med ytterligare 10 miljoner ord ”i överskott”. Det är mycket uppfattat plagiat.

Är GPTZero korrekt?

Medan GPTZero framhåller sin tjänst som mycket kapabel, vissa användare har funnit att tjänstens noggrannhet ”är inkonsekvent, ofta felmärker mänskligt skriven text som AI-genererad och kämpar med vissa typer av genererad text.” Efter ett förslag från Reddit-användare Smellz_Of_Elderberrybad jag ChatGPT att skriva en kort berättelse om boken Gubben och havet som om det vore en gymnasieelev. GPTZero lät sig inte luras.

ChatGPT skriver som om det är en gymnasieelev
Bild använd med tillstånd av upphovsrättsinnehavaren

Jag försökte igen, ändrade texten med lite felplacerad interpunktion, felaktig verbtid och andra små fel, men GPTZero sa fortfarande, ”din text kommer sannolikt att vara skriven helt av AI.”

Skanningen gissade korrekt ett avsnitts AI-ursprung även när andra textgeneratorer än Claude eller GPT-4 användes. Jag lät Gemini 1.5 Pro skriva en separat rapport om Gubben och havet men GPTZero fångade det också.

Noggrannheten hos GPTZero utvärderas fortfarande, men baserat på dessa anekdotiska tester verkar det fungera bra.

Om du använder GPTZero är det viktigt att komma ihåg att fel är möjliga. När du använder GPTZero för att upptäcka AI eller ChatGPT för att hjälpa till att skriva ett dokument, måste du fortfarande kontrollera arbetet för misstag.

Hur fungerar GPTZero?

GTPZeros AI-textbedömning inkluderar statistik över förvirring och bristfällighet.
Bild använd med tillstånd av upphovsrättsinnehavaren

GPTZero analyserar slumpmässigheten i text, känd som förvirring, och enhetligheten i denna slumpmässighet i texten, vilket kallas burstiness i statistik. En AI är mycket konsekvent i sin förvirring och sprickbildning, medan mänskliga författare varierar dessa egenskaper utan någon medvetenhet.

Arbetet är inte gjort, och Tian noterar att fler tester kommer att läggas till för att förbättra noggrannheten för AI-textdetektering. I synnerhet är implicit bias ett område som utforskas som ett annat sätt att upptäcka om texten genereras av en AI.

vi studerar fortfarande implicit bias i LM-genererad text just nu, så förhoppningsvis kommer vi att lägga till några fler tester och faktorer för att förbättra modellen

— Edward Tian (@edward_the6) 3 januari 2023

Hur kan jag använda GPTZero?

GPTZero är tillgänglig på dess webbplats. Kopiera helt enkelt texten du vill kontrollera och klistra in den i den stora rutan märkt Prova det.

GPTZeros hemsida är ganska enkel med en textruta och en skicka-knapp.
Bild använd med tillstånd av upphovsrättsinnehavaren

Det är också möjligt att ladda upp en PDF, Word-dokument eller textfil och klicka på Få resultat knapp. Du måste också markera rutan som anger att du godkänner användarvillkoren.

Alternativ till GPTZero

GPTZero är inte den enda AI-drivna plagiatdetektorn på marknaden idag. OpenAI erbjuder sina GPT-2 utgångsdetektor och har enligt uppgift utvecklat en uppdaterad version, även om det inte finns några ord om när eller om den kommer att släppas. Innehåll i skala AI Content Detection, ZeroGPT (osäker på hur det tog sig förbi varumärkeskontoret), Writefull GPT Detector och Originality.ai erbjuder alla liknande tjänster med varierande grad av noggrannhet.

Varför flaggas mitt skrivande som AI?

Tillsammans med framväxten av ChatGPT och framväxten av verktyg för AI-detektion har både skribenter och läsare nu en ny oro för hur man kan se om innehåll är AI-skapat och om äkta skrift märks som att det kommer från en AI. Detta är särskilt ett problem för studenter som kan få konsekvenser från sina skolor eller universitet om de visar sig använda AI. Vissa elever kör nu för vana sitt eget originalverk genom detektorer som GPTZero och upptäcker att det flaggar upp meningar som AI-skrivna även om de inte var det.

År 2024 en författare för Atlanten, Ian Bogost, beskriven köra sitt eget originalverk genom programvara för att upptäcka plagiat och upptäckte att häpnadsväckande 74 % av hans arbete till en början flaggades som plagierat. Med noggrann kontroll och eliminering lyckades han få ner den siffran till noll, men det tog honom flera timmars granskning och inställningar för att komma dit.

AI-detektering liknar plagiatdetektering, eftersom båda bara kan återspegla de bästa gissningarna om huruvida en text är original och mänskligt genererad eller inte. Och dessa verktyg kräver mycket noggrann granskning, eftersom båda kan tendera att producera falska positiva resultat. Om du upptäcker att ditt arbete flaggas som AI-genererat på GPTZero när det inte var det, kan detta vara av så breda skäl som att du inte är engelska som modersmål, att du är för repetitiv med dina idéer eller att du har använt en verktyg som Grammarly.

Om ditt arbete flaggas som AI, dubbelkolla att du har alla dina citat och citat formaterade på rätt sätt, och försök undvika att använda automatiska verktyg som Grammarly för att göra redigeringar.

Och kom ihåg, detta är GPTZeros svarta låda, ”affärshemlighet” proprietära algoritm som hävdar att ditt skrivande statistiskt sett liknar andra exempel som finns på hela det offentliga internet. Företaget kommer inte att förklara hur dess produkt faktiskt fungerar, eller visa att den gör det korrekt, i en domstol. Så om du hamnar i fara för påstått generativt plagiat, kommer det att vara ditt ord mot deras. Advokat och få dem att bevisa sitt arbete.

Behöver vi verkligen plagiatkontroller?

Genom att driva långt bortom forskningslabbet som många textgenererade AI:er har varit bundna till, släppte OpenAI ChatGPT för allmänheten i slutet av november 2022. I januari 2023 hade ChatGPT över 100 miljoner användare, vilket gör det till den snabbast växande offentliga applikationen hittills.

Det betyder att alla farhågor om plagiat bara kommer att öka när denna AI-hjälp blir tillgänglig i livets alla hörn. Microsoft införlivar OpenAIs teknologi i Bing-sökning, och Google testar sin egen version, känd som Gemini (tidigare Bard).

En färgmålning av en skrattande robot, genererad av Dall-E.
Bild använd med tillstånd av upphovsrättsinnehavaren

På en relaterad anteckning är AI-bildgeneratorer som Dall-E och Stable Diffusion under granskning för potentiella upphovsrättsintrång. Alla dessa artificiella intelligenstjänster har utbildats på skrift, fotografier och konstverk som finns online och som har skapats av miljarder människor.

På ett sätt lånar AI från mänsklig intelligens, inte skapar på egen hand. Om jag lånar av en annan människa måste jag ge kredit och eventuellt betala en licensavgift. Med generativ AI blir det svårare att citera en källa eftersom varje text eller bild bryts ner i diffusa element och sedan sätts ihop igen för att skapa en ny bit med hjälp av tusentals eller miljontals källor.

Vi måste antingen tänka om hur vi känner om upphovsrätt och plagiat eller hitta verktyg som hjälper till att identifiera AI-genererat material och eventuellt utveckla en metod för att ge kredit till det stora antalet människor som bidrar till varje AI-genererat arbete.

Stöd vårt arbete ❤️

Om du gillade den här artikeln, överväg att lämna dricks för att hjälpa oss fortsätta publicera bra innehåll.

Säker betalning med PayPal
Se även:  Är du en AI-bot? 35% av nya webbsidor är AI-skrivna