An Attempt to Develop an Automated Scoring System for Paragraph Writing of Pre-intermediate Learners of English ―A Method for Creating a Learning Model Specific to the Quality of Content of English Writing
| Jazyk: | japonština |
|---|---|
| Rok vydání: | 2023 |
| Předmět: | |
| Zdroj: | 実践女子大学短期大学部紀要 = Jissen Women’s Junior College Review. 44:39-67 |
| ISSN: | 2434-4583 |
| Popis: | 短期大学1 年生向け英語必修科目で実施しているライティングテストのデータを用いた自動採点システムを開発した．人工知能の機械学習の「教師あり学習」に，過去の同一テーマのライティングテストの英文データを，教師評価と共に入力し，クラウドコンピューティングで一般公開されている人工知能の機械学習のサービスを用いて「教師あり学習」を行った．自動採点システムは英文の「内容の質」のみを採点対象とし，Level 1 からLevel 4 の4 段階の採点を行う．このシステムを用いて2022 年度の英語必修科目のライティングテストの英文124 件を採点したところ，自動採点システムと教師評価の一致率は60.5%，相関係数は0.544 ＊＊であった．同システムを授業内で学生に使用させた上でアンケート調査を行い，それをテキストマイニングで分析した． We developed an automated scoring system using data from past writing tests on one theme in a required English course for first-year junior college students and teacher evaluations that were input into a cloud-based artificial-intelligence “supervised” machine learning system that scored the “quality of content” of the texts at four levels（ 1–4）. Then, 124 writing tests for the required English course in AY 2022 were scored; the agreement rate between the automated scoring system and the teacher’s evaluation was 60.5% （R = 0.544**）. Students used the system in class and completed a questionnaire survey that was analyzed by text mining. |
| Databáze: | OpenAIRE |
| Externí odkaz: |
|