講演名 2021-03-05
BERTによるアプリケーションレビュー分類モデルの構築と評価
山田 侑樹(学芸大), 櫨山 淳雄(学芸大),
PDFダウンロードページ PDFダウンロードページへ
抄録(和) ソフトウェアの進化の過程でエンドユーザーの意見やフィードバックは開発者にとって重要である.これらの情報を開発者が効率よく利用するために自然言語処理と機械学習を用いた方法が報告されている.本研究ではアプリケーションレビューを分類する機械学習モデルの構築に取り組む.本研究では.これまで報告されているBag of Wordsとナイーブベイズ,fastTextとロジスティック回帰による分類モデルに加え,BERTによる分類モデルを構築し性能評価を実施した.BERTは近年,自然言語処理システムの性能を飛躍的に向上させた機械学習アルゴリズムである.その結果,BERTによる分類モデルがPrecision 0.7237,Recall 0.7286,F1-Score 0.7173と最も高い性能を示した.
抄録(英) In the process of software development, feedbacks from users are important for developers. Most of this information takes the form of a text. In this research, we build and evaluate a machine learning model to classify the application reviews. In addition to classification models based on Bag of Words and Naive Bayes, fastText and logistic regression, we constructed and evaluated a classification model based on BERT. BERT is a machine learning algorithm that has dramatically improved the performance of natural language processing systems in recent years. The results show that the BERT classification model has the highest performance with Precision 0.7237,Recall 0.7286 and F1-Score 0.7173.
キーワード(和) BERT / 機械学習 / 自然言語処理 / アプリケーションレビュー
キーワード(英) BERT / Machine Learning / NLP / Application Reviews
資料番号 KBSE2020-38
発行日 2021-02-26 (KBSE)

研究会情報
研究会 KBSE
開催期間 2021/3/5(から2日開催)
開催地(和) オンライン開催
開催地(英) Online
テーマ(和) 一般,学生
テーマ(英)
委員長氏名(和) 中川 博之(阪大)
委員長氏名(英) Hiroyuki Nakagawa(Osaka Univ.)
副委員長氏名(和) 猿渡 卓也(NTTデータ)
副委員長氏名(英) Takuya Saruwatari(NTT Data)
幹事氏名(和) 菊地 奈穂美(OKI) / 金子 朋子(NII)
幹事氏名(英) Nahomi Kikuchi(OKI) / Tomoko Kaneko(NII)
幹事補佐氏名(和) 小形 真平(信州大) / 槇原 絵里奈(同志社大)
幹事補佐氏名(英) Shinpei Ogata(Shinshu Univ.) / Erina Nakihara(Doshisha Univ,)

講演論文情報詳細
申込み研究会 Technical Committee on Knowledge-Based Software Engineering
本文の言語 JPN
タイトル(和) BERTによるアプリケーションレビュー分類モデルの構築と評価
サブタイトル(和)
タイトル(英) Building of an Application Reviews Classifier by BERT, and Its Evaluation
サブタイトル(和)
キーワード(1)(和/英) BERT / BERT
キーワード(2)(和/英) 機械学習 / Machine Learning
キーワード(3)(和/英) 自然言語処理 / NLP
キーワード(4)(和/英) アプリケーションレビュー / Application Reviews
第 1 著者 氏名(和/英) 山田 侑樹 / Yuki Yamada
第 1 著者 所属(和/英) 東京学芸大学(略称:学芸大)
okyo Gakugei University(略称:okyo Gakugei Univ.)
第 2 著者 氏名(和/英) 櫨山 淳雄 / Atsuo Hazeyama
第 2 著者 所属(和/英) 東京学芸大学(略称:学芸大)
okyo Gakugei University(略称:okyo Gakugei Univ.)
発表年月日 2021-03-05
資料番号 KBSE2020-38
巻番号(vol) vol.120
号番号(no) KBSE-423
ページ範囲 pp.25-30(KBSE),
ページ数 6
発行日 2021-02-26 (KBSE)