| Popis: |
This thesis investigates if humans can tell apart computer generated and human written questions. Limited work has previously been done in the area of comparing the results of different algorithms. This thesis used generated questions from two different algorithms. One recently developed and more advanced than the other but not as tested. The other algorithm was older but wildly researched. A survey was conducted and shared across social media to gather large amounts of data of peoples perception of different questions. The survey was focused on testing common misconceptions, such as grammar and spelling, to see if it affected the choices taken by the participants. The survey also tested if questions could be distinguished in a more general setting with no directions or questions with obvious errors. The results showed that people are able to tell the generated questions apart about 50 percent of the time. The results were consistent and did not vary between different questions or approaches. The most distinguishing factors were obvious errors such as misspelling and grammar errors, sentence structure and formulation. Detta arbete undersöker om människor kan se skillnad på frågor skrivna av en algoritm eller en människa. Begränsat arbete har tidigare gjorts inom området att jämföra resultat från olika algoritmer. Rapporten använde genererade frågor från två olika algoritmer. En nyligen utvecklad och mer avancerad än den andra men sparsamt testad. Den andra algoritmen var äldre men noga testad. En undersökning genomfördes och delades på olika sociala medier för att samla in stora mängder data om människors uppfattning om olika frågor. Undersökningen fokuserade på att testa vanliga utmärkande drag, såsom grammatik och stavning, för att se om det påverkade deltagarnas val. Undersökningen testade också om frågor kunde särskiljas i en mer allmän utsträckning utan givna uppgifts instruktioner eller frågor med uppenbara fel. Resultat visade att människor kan urskilja de dator genererade frågorna cirka 50 procent av gångerna. Resultaten var konsekventa och varierade inte mellan olika frågor eller olika tillvägagångssätt. De mest utmärkande faktorerna var uppenbara fel så som felstavningar och grammatiska fel, meningsstruktur och formulering. |
