| 講演名 | 2021-08-22 クラウドソーシングにおける成果物評価の提示と追加報酬に関する研究 土方 嘉徳(関西学院大), |
|---|---|
| PDFダウンロードページ |  PDFダウンロードページへ |
| 抄録(和) | 近年の働き方の多様化と業務効率の効率化に伴い，クラウドソーシングサービスが利用されるようになっている．特に近年のIT分野においては，機械学習を用いた高度な知的システムを取り入れたサービスが多くなりつつある．学習データを作成するには，多数のオブジェクトに対して正解ラベルを人手で付与する必要があるが，この作業をクラウドソーシングで実施することが多い．本研究では，上記のタスクを想定して，クラウドソーシングサービスにおける，成果物評価の提示と追加報酬の支給が，作業者の正解データラベル付けのタスクの継続率とパフォーマンス（正答率）の向上に寄与するかどうかを明らかにする．実際のクラウドソーシングサービス上で被験者実験を行ったところ，成果物評価の提示は，質の高い作業者の継続率を高めることと，追加報酬の支給は質の低い作業者の継続率を低くし，結果として継続した作業者全体の正答率を高く維持できることが分かった． |
| 抄録(英) | In recent years, crowdsourcing services have been used to diversify work styles of people and improve work efficiency in companies. Services in the IT field particularly have become to incorporate intelligent systems using machine learning techniques. In order to create training data, it is necessary to manually assign correct labels to a large number of objects, and this task is often performed by crowdsourcing. In this study, assuming the above task, the author investigates whether the presentation of the deliverable (or outcome) evaluation and the provision of additional rewards contribute to the improvement of workers’ persistence and performance (correct answer rate). The author conducted a user experiment on a real crowdsourcing service and found that the presentation of deliverable evaluations increased the persistence rate of high-quality workers, while the provision of additional rewards decreased the persistence rate of low-quality workers and kept high correctness of their deliverables. |
| キーワード(和) | クラウドソーシング / 品質保証 / 成果物評価 / 報酬 / モチベーション / 正答率 |
| キーワード(英) | Crowdsourcing / Quality Assurance / Deliverable Assessment / Bonus Payment / Motivation / Correctness |
| 資料番号 | HCS2021-25 |
| 発行日 | 2021-08-14 (HCS) |
| 研究会情報 | |
| 研究会 | HCS |
|---|---|
| 開催期間 | 2021/8/21(から2日開催) |
| 開催地（和） | オンライン開催 |
| 開催地（英） | Online |
| テーマ（和） | CSCWの理論・実践に関する研究および一般 |
| テーマ（英） | Theory and practice about CSCW |
| 委員長氏名（和） | 井上 智雄(筑波大) |
| 委員長氏名（英） | Tomoo Inoue(Univ. of Tsukuba) |
| 副委員長氏名（和） | 林 勇吾(立命館大) / 神田 智子(大阪工業大学) |
| 副委員長氏名（英） | Yugo Hayashi(Ritsumeikan Univ.) / Tomoko Kanda(Osaka Inst. of Tech.) |
| 幹事氏名（和） | 吉田 悠(日大) / 藤原 健(台湾国立中正大) / 小森 政嗣(阪電通大) |
| 幹事氏名（英） | Haruka Yoshida(Nihon Univ.) / Ken Fujiwara(National Chung Cheng Univ) / Masashi Komori(Osaka Electro-Comm. Univ.) |
| 幹事補佐氏名（和） | 黄 宏軒(福知山公立大) / 飯塚 重善(神奈川大) / 高嶋 和毅(東北大) / 斎藤 博人(東京電機大) / 石井 亮(NTT) |
| 幹事補佐氏名（英） | HUANG HUNGHSUAN(Univ. of Fukuchiyama) / Shigeyoshi Iizuka(Kanagawa Univ.) / Kazuki Takashima(Tohoku Univ.) / Hiroto Saito(Tokyo Denki Univ.) / Ryo Ishii(NTT) |
| 講演論文情報詳細 | |
| 申込み研究会 | Technical Committee on Human Communication Science |
|---|---|
| 本文の言語 | JPN |
| タイトル（和） | クラウドソーシングにおける成果物評価の提示と追加報酬に関する研究 |
| サブタイトル（和） | |
| タイトル（英） | A Study on Performance Feedback and Bonus Payment in Crowdsourcing Services |
| サブタイトル（和） | |
| キーワード(1)（和/英） | クラウドソーシング / Crowdsourcing |
| キーワード(2)（和/英） | 品質保証 / Quality Assurance |
| キーワード(3)（和/英） | 成果物評価 / Deliverable Assessment |
| キーワード(4)（和/英） | 報酬 / Bonus Payment |
| キーワード(5)（和/英） | モチベーション / Motivation |
| キーワード(6)（和/英） | 正答率 / Correctness |
| 第 1 著者 氏名（和/英） | 土方 嘉徳 / Yoshinori Hijikata |
| 第 1 著者 所属（和/英） | 関西学院大学(略称：関西学院大) Kwansei Gakuin University(略称：KGU) |
| 発表年月日 | 2021-08-22 |
| 資料番号 | HCS2021-25 |
| 巻番号（vol） | vol.121 |
| 号番号（no） | HCS-143 |
| ページ範囲 | pp.45-50(HCS), |
| ページ数 | 6 |
| 発行日 | 2021-08-14 (HCS) |