講演名 2018-03-03
特異項目機能分析によるライティング・ルーブリックの評価
石川 勝彦(山梨学院大), 野津 昭文(大分県立看護科学大),
PDFダウンロードページ PDFダウンロードページへ
抄録(和) 小論文評価は選択式の言語テストと異なり正解が一意に決まらない評価である。評価項目をルーブリックに実現しても最終的にはルーブリックの運用には評価者の主観が紛れ込むため,ルーブリック自体は測定論的に優れていることが望ましい。本研究では,複数の評価者が同一の小論文を評価する複数評価データをもとに,ルーブリック項目の信頼性と安定性を確認する統計手法を示す。具体的には評価者間の信頼性を特異項目機能分析(DIF)の枠組みで分析する。さらに,ルーブリックを用いずに行われた総合的評価を、DIFにより分析的に解釈した。
抄録(英) In evaluating essay, we are not able to set only one correct answer, different from language test. Even if evaluation rubric is developed, application of the rubric is subjective in evaluation of essay. So, rubric should be equipped with higer reliability in evaluation. The present study showed the case in that multiple evaluation data was analyzed from the perspective of inter-coder reliability and stability of evaluation. Concretely, multiple evaluation data was analyzed through the frame of differential item functioning(DIF). Additionally, the present analyzed validity and reliability of the results of integrated evaluation without rubric through DIF detection analytically.
キーワード(和) 小論文 / ルーブリック / 項目反応理論 / 特異項目機能分析
キーワード(英) essay / rubric / item response theory / differential item functioning
資料番号 ET2017-131
発行日 2018-02-24 (ET)

研究会情報
研究会 ET
開催期間 2018/3/3(から1日開催)
開催地(和) 高知工科大学(永国寺キャンパス)
開催地(英) Kochi University of Technology (Eikokuji Campus)
テーマ(和) 電子教科書・e-Learningの標準化と利活用/一般
テーマ(英) Standardization and Utilization of e-Textbook/e-Learning, etc.
委員長氏名(和) 宮寺 庸造(学芸大)
委員長氏名(英) Yozo Miyadera(Tokyo Gakugei Univ.)
副委員長氏名(和) 中村 勝一(福島大)
副委員長氏名(英) Shoichi Nakamura(Fukushima Univ.)
幹事氏名(和) 東本 崇仁(東京工芸大) / 森本 容介(放送大)
幹事氏名(英) Takahito Toumoto(Tokyo Polytechnic Univ.) / Yosuke Morimoto(Open Univ. of Japan)
幹事補佐氏名(和) 中山 祐貴(早大) / 倉山 めぐみ(函館高専)
幹事補佐氏名(英) Hiroki Nakayama(Waseda Univ.) / Megumi Kurayama(National Inst. of Tech., Hakodate College)

講演論文情報詳細
申込み研究会 Technical Committee on Educational Technology
本文の言語 JPN
タイトル(和) 特異項目機能分析によるライティング・ルーブリックの評価
サブタイトル(和)
タイトル(英) Evaluation of items of writing rubric through differential item functioning
サブタイトル(和)
キーワード(1)(和/英) 小論文 / essay
キーワード(2)(和/英) ルーブリック / rubric
キーワード(3)(和/英) 項目反応理論 / item response theory
キーワード(4)(和/英) 特異項目機能分析 / differential item functioning
第 1 著者 氏名(和/英) 石川 勝彦 / Katsuhiko Ishikawa
第 1 著者 所属(和/英) 山梨学院大学(略称:山梨学院大)
YAMANASHIGAKUIN Univ.(略称:YAMAGAKU Univ.)
第 2 著者 氏名(和/英) 野津 昭文 / Akifumi Notsu
第 2 著者 所属(和/英) 大分県立看護科学大学(略称:大分県立看護科学大)
Oita University of Nursing and Health Sciences(略称:OUN)
発表年月日 2018-03-03
資料番号 ET2017-131
巻番号(vol) vol.117
号番号(no) ET-469
ページ範囲 pp.243-248(ET),
ページ数 6
発行日 2018-02-24 (ET)