講演抄録/キーワード |
講演名 |
2021-12-11 13:00
深層学習と多次元項目反応理論を用いた複数観点同時自動採点手法の開発 ○柴田拓海・宇都雅輝(電通大) ET2021-33 |
抄録 |
(和) |
近年,深層学習を利用した小論文自動採点手法が多数提案されている.これらの手法の多くは単一の全体得点のみを予測対象としているが,主に学習場面などで小論文試験を運用する場合には,受験者へのより詳細なフィードバックを行うために評価観点別の得点を活用したい場面も少なくない.このような需要に応えるため,全体得点に加えて複数評価観点に対応する細目得点も同時に予測できるモデルが提案されている.しかし従来モデルは各評価観点に応じた複雑なニューラルネットワーク層を持つ構造であるため,得点予測の根拠について解釈性が低いという問題があった.この問題を解決するため,本研究では多次元項目反応理論を使用し,予測根拠の解釈性を高めた新しい複数観点同時自動採点モデルを提案する. |
(英) |
In recent years, deep neural network (DNN)-based automated essay scoring (AES) models that can simultaneously predict the overall score and multiple trait-specific scores have been proposed. However, the main problem of conventional models is the lack of explainability. To resolve this problem, this study proposes a new trait-based DNN-AES model with high explainability by integrating multidimensional item response theory. The proposed model succeeded in improving explainability without a significant loss of accuracy compared to a state-of-the-art conventional model. |
キーワード |
(和) |
記述・論述試験 / 自動採点 / 深層学習 / 多次元項目反応理論 / 説明可能性 / / / |
(英) |
essay-type tests / automated essay scoring / deep neural networks / multidimensional item response theory / explainability / / / |
文献情報 |
信学技報, vol. 121, no. 294, ET2021-33, pp. 23-28, 2021年12月. |
資料番号 |
ET2021-33 |
発行日 |
2021-12-04 (ET) |
ISSN |
Online edition: ISSN 2432-6380 |
著作権に ついて |
技術研究報告に掲載された論文の著作権は電子情報通信学会に帰属します.(許諾番号:10GA0019/12GB0052/13GB0056/17GB0034/18GB0034) |
PDFダウンロード |
ET2021-33 |
研究会情報 |
研究会 |
ET |
開催期間 |
2021-12-11 - 2021-12-11 |
開催地(和) |
オンライン開催 |
開催地(英) |
Online |
テーマ(和) |
若手企画/一般 |
テーマ(英) |
Sessions for Young Researchers (Young Researcher Awards Selection), etc. |
講演論文情報の詳細 |
申込み研究会 |
ET |
会議コード |
2021-12-ET |
本文の言語 |
日本語 |
タイトル(和) |
深層学習と多次元項目反応理論を用いた複数観点同時自動採点手法の開発 |
サブタイトル(和) |
|
タイトル(英) |
Development of trait-based neural automated essay scoring incorporating multidimensional item response theory |
サブタイトル(英) |
|
キーワード(1)(和/英) |
記述・論述試験 / essay-type tests |
キーワード(2)(和/英) |
自動採点 / automated essay scoring |
キーワード(3)(和/英) |
深層学習 / deep neural networks |
キーワード(4)(和/英) |
多次元項目反応理論 / multidimensional item response theory |
キーワード(5)(和/英) |
説明可能性 / explainability |
キーワード(6)(和/英) |
/ |
キーワード(7)(和/英) |
/ |
キーワード(8)(和/英) |
/ |
第1著者 氏名(和/英/ヨミ) |
柴田 拓海 / Takumi Shibata / シバタ タクミ |
第1著者 所属(和/英) |
電気通信大学大学院 (略称: 電通大)
The University of Electro-Communications (略称: UEC) |
第2著者 氏名(和/英/ヨミ) |
宇都 雅輝 / Masaki Uto / ウト マサキ |
第2著者 所属(和/英) |
電気通信大学大学院 (略称: 電通大)
The University of Electro-Communications (略称: UEC) |
第3著者 氏名(和/英/ヨミ) |
/ / |
第3著者 所属(和/英) |
(略称: )
(略称: ) |
第4著者 氏名(和/英/ヨミ) |
/ / |
第4著者 所属(和/英) |
(略称: )
(略称: ) |
第5著者 氏名(和/英/ヨミ) |
/ / |
第5著者 所属(和/英) |
(略称: )
(略称: ) |
第6著者 氏名(和/英/ヨミ) |
/ / |
第6著者 所属(和/英) |
(略称: )
(略称: ) |
第7著者 氏名(和/英/ヨミ) |
/ / |
第7著者 所属(和/英) |
(略称: )
(略称: ) |
第8著者 氏名(和/英/ヨミ) |
/ / |
第8著者 所属(和/英) |
(略称: )
(略称: ) |
第9著者 氏名(和/英/ヨミ) |
/ / |
第9著者 所属(和/英) |
(略称: )
(略称: ) |
第10著者 氏名(和/英/ヨミ) |
/ / |
第10著者 所属(和/英) |
(略称: )
(略称: ) |
第11著者 氏名(和/英/ヨミ) |
/ / |
第11著者 所属(和/英) |
(略称: )
(略称: ) |
第12著者 氏名(和/英/ヨミ) |
/ / |
第12著者 所属(和/英) |
(略称: )
(略称: ) |
第13著者 氏名(和/英/ヨミ) |
/ / |
第13著者 所属(和/英) |
(略称: )
(略称: ) |
第14著者 氏名(和/英/ヨミ) |
/ / |
第14著者 所属(和/英) |
(略称: )
(略称: ) |
第15著者 氏名(和/英/ヨミ) |
/ / |
第15著者 所属(和/英) |
(略称: )
(略称: ) |
第16著者 氏名(和/英/ヨミ) |
/ / |
第16著者 所属(和/英) |
(略称: )
(略称: ) |
第17著者 氏名(和/英/ヨミ) |
/ / |
第17著者 所属(和/英) |
(略称: )
(略称: ) |
第18著者 氏名(和/英/ヨミ) |
/ / |
第18著者 所属(和/英) |
(略称: )
(略称: ) |
第19著者 氏名(和/英/ヨミ) |
/ / |
第19著者 所属(和/英) |
(略称: )
(略称: ) |
第20著者 氏名(和/英/ヨミ) |
/ / |
第20著者 所属(和/英) |
(略称: )
(略称: ) |
講演者 |
第1著者 |
発表日時 |
2021-12-11 13:00:00 |
発表時間 |
20分 |
申込先研究会 |
ET |
資料番号 |
ET2021-33 |
巻番号(vol) |
vol.121 |
号番号(no) |
no.294 |
ページ範囲 |
pp.23-28 |
ページ数 |
6 |
発行日 |
2021-12-04 (ET) |