Wat is GPTZero? Hoe het te gebruiken om door AI gegenereerde tekst te detecteren

Sinds de lancering is OpenAI's ChatGPT een punt van zorg geworden voor onderwijsinstellingen over de hele wereld, aangezien studenten het zijn gaan gebruiken om essays te schrijven en beoordelingen te bedriegen. Gezien hoe natuurlijk de door de chatbot gegenereerde tekst eruitziet, vinden instructeurs het moeilijker om te bepalen of het werk van studenten origineel is.

Om leraren te helpen bij het beoordelen van de opdrachten van studenten, heeft een afgestudeerde informatica een tool ontwikkeld met de naam GPTZero, die bepaalt of een tekst kunstmatig is gegenereerd. In dit artikel wordt uitgelegd hoe de tool werkt, hoe deze te gebruiken en of deze door AI gegenereerde inhoud kan detecteren.

Wat is GPTZero en hoe werkt het?

GPTZero is een AI-tool voor tekstanalyse, ontwikkeld door Edward Tian, ​​afgestudeerd in informatica, om instructeurs te helpen geplagieerde tekst te onderscheiden van origineel werk. De tool controleert verbijstering en barstigheid in een tekst om te bepalen of deze kunstmatig is gegenereerd of door een mens is gemaakt.

Laten we, zonder in details te treden, eens kijken naar wat deze termen betekenen:

• Verbijstering is een maat voor tekstwillekeurigheid in Natural Language Processing (NLP). Tekst die door een mens is geschreven, is meestal minder gestructureerd en onvoorspelbaarder, dus de verbijsteringswaarde zou hoger moeten zijn, terwijl een door AI gegenereerde tekst een lage verbijsteringsscore zou moeten hebben.
• Uitbarsting houdt rekening met andere variabelen waar geen rekening mee is gehouden om de tekstanalyse te verbeteren. De term verwijst naar het verschijnen van niet-gewone items in willekeurige clusters. Door AI gegenereerde tekst heeft meestal een meer consistente structuur dan tekst die door mensen is geschreven. Burstiness helpt ons dat te identificeren.

GPTZero Classic is sinds begin 2023 openbaar toegankelijk en vanaf maart 2023 gratis te gebruiken. De gratis versie heeft echter een tekenlimiet van 5000 per document en u kunt slechts drie documenten tegelijk analyseren.

GPTZero biedt twee premiumversies om te voldoen aan de behoeften van onderwijzers en gebruikers die maandelijks miljoenen woorden willen analyseren: GPTZero Educator en GPTZero Pro. De tekenlimiet per document is hoger in premiumversies dan in de gratis versie, en ze laten je onbeperkte bestanden analyseren in batchmodus.

Volg deze stappen om u te abonneren op deze premiumversies:

1. Ga naar GPTZero-dashboard.
2. Log in met je bestaande account of maak een nieuw account aan.
3. Na het inloggen kun je upgraden naar een premium versie naar keuze.

GPTZero gebruiken om door AI gegenereerde tekst te detecteren

In tegenstelling tot ChatGPT is er geen registratie vereist op GPTZero. U kunt eenvoudig toegang krijgen tot de tool via de website. Laten we eens kijken hoe u het kunt openen en gebruiken:

1. Ga naar GPTZero.
2. Kopieer en plak de tekst die u wilt analyseren in het vak of upload een bestand.
3. Vink het vakje hiernaast aan Ik ga akkoord met de Algemene Voorwaarden.
4. Klik op de Krijg resultaten doos.

Na voltooiing van de scan zal GPTZero u vertellen of de tekst door een mens is geschreven of door kunstmatige intelligentie is gegenereerd.

Kan GPTZero door AI gegenereerde tekst correct herkennen?

Om te testen hoe nauwkeurig GPTZero door AI gegenereerde tekst detecteert, analyseren we drie teksten in de tool: tekst gegenereerd door AI, door mensen geschreven tekst en door AI gegenereerde tekst die door een ander is geparafraseerd hulpmiddel. Laten we eens kijken hoe GPTZero op elke invoer reageert.

We voegen de instructies toe over hoe we deze tests hebben uitgevoerd, zodat u ze zelf kunt uitvoeren.

1. De analyse van door AI gegenereerde tekst in GPTZero

Om door AI gegenereerde tekst te analyseren, gaan we eerst de tekst genereren met ChatGPT, een AI-chatbot die wordt aangedreven door GPT-technologie. Volg hiervoor deze stappen:

1. Ga naar AI openen.
2. Klik op de Probeer ChatGPT knop.
3. Log in of maak een account aan.
4. Voer een prompt in om een ​​tekst te genereren.
5. Kopieer de tekst die door de tool is gegenereerd zodra deze is voltooid.
6. Analyseer de tekst in GPTZero, zoals we eerder hebben uitgelegd.

Je kunt ook andere gebruiken AI-schrijfhulpmiddelen om de tekst te genereren die u wilt analyseren.

GPTZero retourneerde de volgende uitvoer toen we door AI gegenereerde tekst in de tool analyseerden:

Aangezien de tekst door AI is gegenereerd, heeft GPTZero correct voorspeld dat deze waarschijnlijk door AI is gegenereerd. Om de test uitdagender te maken, hebben we de door ChatGPT gegenereerde tekst geparafraseerd.

2. De analyse van een geparafraseerde, door AI gegenereerde tekst in GPTZero

U kunt kiezen uit honderden hulpmiddelen voor parafraseren om de tekst te parafraseren. Voor dit geval hebben we Scribbr gebruikt. Als u dezelfde tool wilt gebruiken, volgt u de stappen:

1. Ga naar Scribbr.
2. Kopieer de door AI gegenereerde tekst die we eerder in GPTZero hebben geanalyseerd en plak deze in de tool.
3. Klik op de Parafrase knop.
4. Laat Scribbr de tekst voor je parafraseren.
5. Voer de GPTZero-test opnieuw uit na het parafraseren.

Hier is de output van de GPTZero toen we de geparafraseerde AI-gegenereerde tekst analyseerden:

Lichte parafrasering heeft het voor GPTZero moeilijk gemaakt om te bepalen of de tekst allemaal door AI is gegenereerd.

3. De analyse van door mensen geschreven inhoud in GPTZero

In sommige gevallen geven tools zoals GPTZero een fout-positief resultaat, wat betekent dat ze iets als onjuist beschouwen terwijl dat niet zo is. Om te bepalen of GPTZero ook valse positieven oplevert, hebben we drie tests in de tool uitgevoerd, waarbij we drie verschillende door mensen geschreven teksten hebben geanalyseerd.

Van deze drie tests retourneerde de tool één vals positief door te stellen dat een originele tekst door AI was gegenereerd; een keer slaagde het er niet in om een ​​conclusie te trekken, en een keer identificeerde het de tekst correct als door mensen geschreven.

Als u door mensen geschreven inhoud wilt testen, kunt u deze kopiëren van een authentieke bron of zelf een paar paragrafen schrijven.

Moet u de resultaten van GPTZero vertrouwen?

Op basis van onze tests kan het riskant zijn om uitsluitend op de resultaten van deze tool te vertrouwen. In feite verschijnt er elke keer dat u een resultaat genereert met behulp van de tool een disclaimer, die docenten waarschuwt niet te vertrouwen op de resultaten van deze tool.

Dus, tenzij de ontwikkelaar van de tool garandeert dat de resultaten onfeilbaar zijn, moeten docenten er niet volledig op vertrouwen. Waarom? Omdat het oneerlijk zou zijn voor een student om een ​​slecht cijfer te krijgen simpelweg omdat GPTZero een vals positief resultaat terugstuurde.

Bovenstaande testen zijn uitgevoerd in februari 2023. GPTZero is momenteel een vrij nieuwe tool, dus de nauwkeurigheid ervan kan in de loop van de tijd veranderen.

Vertrouw niet altijd op AI-detectieresultaten

Als mogelijk tegengif voor de GPT-technologie van OpenAI heeft GPTZero een groot potentieel; het staat echter nog in de kinderschoenen. Op dit moment is het niet helemaal betrouwbaar. Maar zal de hoofdversie van GPTZero alle beperkingen kunnen overwinnen en de AI-inhoud nauwkeurig kunnen vangen? Om erachter te komen, zullen we gewoon moeten wachten.

Behalve dat het studenten nog een reden geeft om te spieken bij beoordelingen, vormt ChatGPT ook een serieuze bedreiging voor de cyberbeveiliging.