Skilja mellan mänskligt och artificiellt skrivna texter : Experimentell undersökning av universitetslärares bedömningsförmåga samt självskattning gentemot verktyget ChatGPT

Idag finns möjligheten att skriva texter med chatbots som är en form av artificiell intelligens. En av de framträdande chatbotarna är ChatGPT som exempelvis kan generera text. På universitetet förekommer det examinationsuppgifter där studenter skriver texter. Det är då möjligt för studenter att använda ChatGPT som hjälpmedel vilket kan anses som fusk. Denna studie ämnar undersöka hur väl universitetslärare har möjlighet att skilja på texter skrivna av studenter och ChatGPT. Ytterligare undersöker studien universitetslärares acceptans gällande ChatGPT som lärarverktyg och verktyg för studenter. Den använda metoden var enkät med experimentdel samt frågor gällande acceptans. Studien bestod av 38 deltagare mellan 30–72 år med medelåldern 49,3 år. Studien Av dessa var 22 kvinnor, 14 män och 2 vill ej ange. Deras uppgift var att bedöma tre texter. Texterna var antingen av en student eller av ChatGPT. Resultaten visade att universitetslärare inte med säkerhet kan avgöra om det är en student eller ChatGPT som skrivit en text. Endast i en av texterna kunde lärarna se en skillnad mellan texterna och kunna urskilja på vem som hade skrivit det. Faktorer som enligt deltagarna gjorde att texterna verkade skriven av ChatGPT var att den var välskriven och källornas placering. Det fanns inte en tydlig attityd för eller mot användning av ChatGPT, varken som verktyg för lärare eller lärverktyg för studenter. Däremot var den upplevda nyttan (Performance expectancy, PE) viktigast. De övergripande slutsatserna av denna studie är att lärare har svårt att se om en text är skriven av ChatGPT eller en student.
Today the possibility exists to write text with chatbots, which is a form of artificial intelligence. One of the prominent chatbots is ChatGPT that has the capability to generate texts as an example. At universities, it is common to have examination tasks where students are required to write texts. It has therefore created the possibility for students to use ChatGPT as a tool which could be considered cheating. This study aims to research how well university teachers possess the capability of distinguishing texts written by students compared to ChatGPT. Furthermore, research about university teachers’ acceptance in the usage of ChatGPT as a tool both for university teachers and students. The method used was a survey that’s part experiment and questions about acceptance. The study had a total of 38 participants between 30-72 years old and the mean age being 49.3. The study consisted of 22 women, 14 men and 2 did not want to specify. Their task was to read and assess three texts. These texts were written by a student or ChatGPT. The results showed that university teachers could not identify if the author was a student or ChatGPT. There was only one text that university teachers could identify a difference between the two texts and distinguish who had written it. Factors according to the participants that seemed to distinguish if the text was written by ChatGPT were that it was well written and the placement of sources. There was no definite attitude towards or against the usage of ChatGPT, neither as a tool for teachers or students. Thus, the perceived usefulness (Performance expectancy, PE) was most important. The overall conclusion of this study was that teachers found it difficult to identify if the text was written by ChatGPT or a student.