- Met de opkomst van ChatGPT, de door kunstmatige intelligentie aangedreven chatbot die opvallend ‘natuurlijke’ teksten genereert, maken schrijvers en leraren zich in toenemende mate zorgen.
- De oplossing voor deze problemen lijkt te komen in de vorm van GPTZero, een app die door artificial intelligence (ai) geschreven teksten kan detecteren.
- De app is al openbaar voor het publiek, maar werkt nog niet feilloos en herkent nog geen Nederlandse taal.
- Lees ook: ChatGPT krijgt alle aandacht: maar de chatbot draait onderliggend op applicaties die een nieuwe toekomst openen voor toepassingen van artificial intelligence
Met de opkomst van ChatGPT, de door kunstmatige intelligentie aangedreven chatbot die uiterst menselijke teksten genereert, maken schrijvers en leraren zich toenemend zorgen. De eerste groep omdat ze hun werk zien verdwijnen en problemen rondom plagiaat zien toenemen. De tweede groep omdat ze denken dat studenten verslagen niet meer zelf zullen schrijven, maar dit aan een door artificial intelligence (ai) aangestuurde software overlaten.
De oplossing voor deze problemen lijkt nu te komen van Edward Tian, student Journalistiek aan de Princeton Universiteit. Hij bouwde tijdens de jaarwisseling GPTZero, een app die door kunstmatige intelligentie geschreven teksten kan detecteren.
GPTZero baseert zich op twee factoren die volgens Tian aantonen dat een tekst door een persoon en niet door software is geschreven: ‘perplexity’ en ‘burstiness’.
Met perplexity wordt de variëteit in woordgebruik en zinsopbouw bedoeld. AI heeft namelijk de neiging om terug te vallen op een beperkt aantal woorden en bouwt zinnen vaak op dezelfde manier op. Mensen doen dit niet, omdat ze veel verschillende manieren van schrijven en vertellen kennen.
Met burstiness wordt de gelijkenis tussen zinnen aangegeven. Mensen schrijven niet vaak dezelfde zinnen, AI doet dit met regelmaat.
De app heeft natuurlijk meerdere teksten en artikelen als basis. Het achterliggende model van Tian werkt in essentie dus als een toepassing van kunstmatige intelligentie met een dataset ingevoerd door een persoon, in dit geval Tian.
De app vergelijkt een ingevoerde tekst met de dataset en geeft hieraan een score op basis van de eerder genoemde criteria. Deze wordt vervolgens gekoppeld aan referentiescores voor AI-teksten en menselijke teksten om in te schatten of de tekst door software is gegenereerd of door mensen.
Op dit moment lijkt GPTZero alleen te werken met Engelse teksten. Alle Nederlandse teksten, door ChatGPT gegenereerd of zelf geschreven, ziet hij als menselijk.
Met Engelse teksten ziet de app wel verschil. In 4 van de 5 tests die we deden, had de app het goed. Maar de tekst over fietsen die we in de stijl van een comedian door ChatGPT lieten schrijven, werd toch gelabeld als "waarschijnlijk door een mens geschreven".
Tian geeft in zijn substack-nieuwsbrief aan dat hij nog werkt aan de app. Zo wil hij de herkenningsmogelijkheid uitbreiden en de app in zijn geheel opschalen.
Ondertussen werkt OpenAI, het bedrijf achter ChatGPT, ook aan een oplossing voor plagiaat. Het bedrijf wil in de toekomst een watermerk toevoegen aan teksten die door de chatbot zijn gegenereerd.
