講演名 2023-03-23
神経難病患者の発話シーンに対する口形認識
権藤 優季(九工大), 中村 祐哉(九工大), 齊藤 剛史(九工大), 伊藤 和幸(NRCPD),
PDFダウンロードページ PDFダウンロードページへ
抄録(和) 我々は,神経難病患者のコミュニケーションの代替法として用いられている口文字コミュニケーションの支援システムの開発を目的として,その基盤技術である口形認識に取り組んでいる.研究を進める上で神経難病患者の発話シーン収集が重要であるが,本論文では,先行研究よりも大幅に多い31名より6口形の発話シーンを収集した.収集した発話シーンを用いて,Vision Transformerによる口形認識に取り組んだ.さらにデータ数に対応する撮影日数と認識精度,経過日数に伴う認識精度の関係,患者毎の認識の傾向など多方面的な解析を行った.本論文ではこれらの解析結果についてまとめる.
抄録(英) We are working on mouth shape recognition, which is the basic technology for the development of mouth-shape character method which is used as an alternative communication method for patients with intractable neurological diseases. It is important to collect utterance scenes of patients in order to proceed with research, and in this paper, we collected utterance scenes of six mouth forms from 31 patients, which is significantly more than the previous research. Using the collected utterance scenes, we worked on a mouth shape recognition experiment using Vision Transformer. In addition, multifaceted analyzes were conducted, including the number of days shooted and recognition accuracy corresponding to the number of data, the relationship between recognition accuracy with the number of elapsed days, and the tendency of recognition for each patient. This paper summarizes these analysis results.
キーワード(和) 口形認識 / 神経難病患者 / Vision Transformer
キーワード(英) Mouth shape recognition / patient with intractable neurological diseases / Vision Transformer
資料番号 WIT2022-24
発行日 2023-03-15 (WIT)

研究会情報
研究会 WIT / IPSJ-AAC
開催期間 2023/3/22(から2日開催)
開催地(和) オンライン開催
開催地(英) Online
テーマ(和) 聴覚・視覚障害者支援、一般
テーマ(英)
委員長氏名(和) 酒向 慎司(名工大) / 小林 正朋(日本IBM)
委員長氏名(英) Shinji Sakou(Nagoya Inst. of Tech.) / 小林 正朋(日本IBM)
副委員長氏名(和) 雨宮 智浩(東大)
副委員長氏名(英) Tomohiro Amemiya(Univ. of Tokyo)
幹事氏名(和) 半田 隆志(埼玉県産業技術総合センター) / 塩野目 剛亮(帝京大) / 宮城 愛美(筑波技術大) / 杉原 太郎(東京工業大学) / 西﨑 実穂(岩手県立大学) / 平賀 瑠美(筑波技術大学) / 湯野 悠希(リオン株式会社)
幹事氏名(英) Takashi Handa(Saitama Industrial Tech. Center) / Takeaki Shionome(Teikyo Univ.) / Manabi Miyagi(Tsukuba Univ. of Tech.) / 杉原 太郎(東京工業大学) / 西﨑 実穂(岩手県立大学) / 平賀 瑠美(筑波技術大学) / 湯野 悠希(リオン株式会社)
幹事補佐氏名(和) 細野 美奈子(産総研) / 菅野 亜紀(名大) / 小森 智康(NHK)
幹事補佐氏名(英) Minako Hosono(AIST) / Aki Sugano(Nagoya Univ.) / Tomoyasu Komori(NHK)

講演論文情報詳細
申込み研究会 Technical Committee on Well-being Information Technology / Special Interest Group on Assistive & Accessible Computin
本文の言語 JPN
タイトル(和) 神経難病患者の発話シーンに対する口形認識
サブタイトル(和)
タイトル(英) Mouth shape recognition for speech scene of patients with intractable neurological diseases
サブタイトル(和)
キーワード(1)(和/英) 口形認識 / Mouth shape recognition
キーワード(2)(和/英) 神経難病患者 / patient with intractable neurological diseases
キーワード(3)(和/英) Vision Transformer / Vision Transformer
第 1 著者 氏名(和/英) 権藤 優季 / Yuki Gondo
第 1 著者 所属(和/英) 九州工業大学(略称:九工大)
Kyushu Institute of Technology(略称:kyutech)
第 2 著者 氏名(和/英) 中村 祐哉 / Yuya Nakamura
第 2 著者 所属(和/英) 九州工業大学(略称:九工大)
Kyushu Institute of Technology(略称:kyutech)
第 3 著者 氏名(和/英) 齊藤 剛史 / Takeshi Saitoh
第 3 著者 所属(和/英) 九州工業大学(略称:九工大)
Kyushu Institute of Technology(略称:kyutech)
第 4 著者 氏名(和/英) 伊藤 和幸 / Kazuyuki Itoh
第 4 著者 所属(和/英) 国立障害者リハビリテーションセンター研究所(略称:NRCPD)
National Rehabilitation Center for Persons with Disabilities(略称:NRCPD)
発表年月日 2023-03-23
資料番号 WIT2022-24
巻番号(vol) vol.122
号番号(no) WIT-450
ページ範囲 pp.27-31(WIT),
ページ数 5
発行日 2023-03-15 (WIT)