講演名 2023-09-12
大規模条件付き画像生成モデルを用いたテキストによる出力制御可能なアイコン線画彩色
宮内 洸希(電通大), 折原 良平(電通大), 清 雄一(電通大), 田原 康之(電通大), 大須賀 昭彦(電通大),
PDFダウンロードページ PDFダウンロードページへ
抄録(和) Webサイトにはアイコンを使用することはユーザーインターフェースの観点から欠かせない. Webサイト制作者にとって, アイコンの制作は困難である. 具体的には, アイコンの線画からはみ出したり塗り残しが出ないように塗ることはデザインの経験がない人には難しい. また, 線画を一貫したスタイルで描くこともデザインの技能を持たない人には困難である. この問題を解決するために, 画像を生成するためのモデルであるStable Diffusionを活用し, テキストに出力結果の制御を可能にするアイコン生成へのアプローチを提案する. 具体的には, Stable Diffusionに基づく画像生成モデルであるUni-ControlNetを用い, 線画と参照画像からアイコンを生成する. このモデルの学習を容易にするために, Gradient Styleのアイコンとそれに対応するキャプションからなるデータセットを作成した. また, 参照画像と彩色済みのアイコンのグラデーションの類似度を定量的に評価する指標を提案した. 本手法では既存手法では困難であった環状構造をもつアイコンの彩色も可能であることが示された.
抄録(英) Icons are indispensable elements for websites and smartphone applications. For website developers, the creation of icons poses a formidable challenge. Specifically, it is difficult to color without deviating from the line art of the icon. It is also challenging to paint line drawings while maintaining a consistent style. In order to address this problem, we propose an innovative approach to icon generation that leverages Stable Diffusion, an expansive model for generating images, and enables textual control over the generated output. Specifically, we painted line drawings using a Stable Diffusion-based image generation model, Uni-ControlNet, which operates on multiple conditions to generate images. To facilitate the training of this model, we assembled a dataset comprising icons in the gradient style, along with their corresponding captions. We proposed a quantitative index to evaluate the similarity of gradients between reference images and colored line drawings. Our method was shown to be able to color icons with hollow structures, which was difficult with existing methods.
キーワード(和) 線画彩色 / 拡散モデル / 条件付き画像生成 / アイコンデザイン
キーワード(英) Automatic Colorization / Diffusion Model / Conditional Generation / Icon Design
資料番号 AI2023-34
発行日 2023-09-05 (AI)

研究会情報
研究会 AI
開催期間 2023/9/12(から2日開催)
開催地(和) 登別グランドホテル
開催地(英)
テーマ(和) 合同エージェントワークショップ&シンポジウム2023 (JAWS2023)
テーマ(英)
委員長氏名(和) 藤田 桂英(東京農工大)
委員長氏名(英) Katsuhide Fujita(Tokyo Univ. of Agriculture and Technology)
副委員長氏名(和) 櫻井 祐子(名工大) / 大囿 忠親(名工大)
副委員長氏名(英) Yuko Sakurai(agoya Inst. of Tech.) / Tadachika Ozono(Nagoya Inst. of Tech.)
幹事氏名(和) 松崎 和賢(中大) / 中島 悠(東邦大)
幹事氏名(英) Kazutaka Matsuzaki(Chuo Univ.) / Yuu Nakajima(Toho Univ.)
幹事補佐氏名(和)
幹事補佐氏名(英)

講演論文情報詳細
申込み研究会 Technical Committee on Artificial Intelligence and Knowledge-Based Processing
本文の言語 JPN-ONLY
タイトル(和) 大規模条件付き画像生成モデルを用いたテキストによる出力制御可能なアイコン線画彩色
サブタイトル(和)
タイトル(英)
サブタイトル(和)
キーワード(1)(和/英) 線画彩色 / Automatic Colorization
キーワード(2)(和/英) 拡散モデル / Diffusion Model
キーワード(3)(和/英) 条件付き画像生成 / Conditional Generation
キーワード(4)(和/英) アイコンデザイン / Icon Design
第 1 著者 氏名(和/英) 宮内 洸希 / Koki Miyauchi
第 1 著者 所属(和/英) 電気通信大学(略称:電通大)
The University of Electro-Communications(略称:UEC)
第 2 著者 氏名(和/英) 折原 良平 / Ryohei Orihara
第 2 著者 所属(和/英) 電気通信大学(略称:電通大)
The University of Electro-Communications(略称:UEC)
第 3 著者 氏名(和/英) 清 雄一 / Yuichi Sei
第 3 著者 所属(和/英) 電気通信大学(略称:電通大)
The University of Electro-Communications(略称:UEC)
第 4 著者 氏名(和/英) 田原 康之 / Yasuyuki Tahara
第 4 著者 所属(和/英) 電気通信大学(略称:電通大)
The University of Electro-Communications(略称:UEC)
第 5 著者 氏名(和/英) 大須賀 昭彦 / Akihiko Ohsuga
第 5 著者 所属(和/英) 電気通信大学(略称:電通大)
The University of Electro-Communications(略称:UEC)
発表年月日 2023-09-12
資料番号 AI2023-34
巻番号(vol) vol.123
号番号(no) AI-190
ページ範囲 pp.201-206(AI),
ページ数 6
発行日 2023-09-05 (AI)