| 講演名 | 2012-03-09 計算サーバ間相互接続網の構造がMapReduce処理のシャッフル完了時間に与える影響について(配送方法) 松木 辰真, 木村 達明, 森 達哉, 滝根 哲哉, |
|---|---|
| PDFダウンロードページ |  PDFダウンロードページへ |
| 抄録(和) | データセンターにおける代表的な分散処理機構であるMapReduce処理では,シャッフルと呼ばれる大量のデータ転送が計算サーバ間で行われる.本稿では,計算サーバ間を相互接続するネットワークの構造がMapReduce処理におけるシャツフルの完了時間にどのような影響を与えるかについて考察する.特に本稿では,代表的なネットワーク構造として単純木構造とFat-Tree構造を取り上げ,理論的な検討並びにシミュレーション実験を併用して,相互接続網の構造がシャッフルの完了時間に与える影響について考察する. |
| 抄録(英) | MapReduce processing, a typical distributed processing scheme in data centers, includes shuffle operation, where a massive amount of data are transferred between computation servers. In this article, we investigate the impact of the interconnection network structure on the shuffle completion time. For this purpose, we consider a simple tree structure and fat-tree strucure, and investigate their impact on the shuffle completion time through theoretical examination and simulation experiments. |
| キーワード(和) | MapReduce処理 / シャッフル完了時間 / 単純木構造 / Fat-Tree構造 |
| キーワード(英) | MapReduce processing / shuffle completion time / tree structure / fat-tree structure |
| 資料番号 | IN2011-200 |
| 発行日 |
| 研究会情報 | |
| 研究会 | IN |
|---|---|
| 開催期間 | 2012/3/1(から1日開催) |
| 開催地（和） | |
| 開催地（英） | |
| テーマ（和） | |
| テーマ（英） | |
| 委員長氏名（和） | |
| 委員長氏名（英） | |
| 副委員長氏名（和） | |
| 副委員長氏名（英） | |
| 幹事氏名（和） | |
| 幹事氏名（英） | |
| 幹事補佐氏名（和） | |
| 幹事補佐氏名（英） | |
| 講演論文情報詳細 | |
| 申込み研究会 | Information Networks (IN) |
|---|---|
| 本文の言語 | JPN |
| タイトル（和） | 計算サーバ間相互接続網の構造がMapReduce処理のシャッフル完了時間に与える影響について(配送方法) |
| サブタイトル（和） | |
| タイトル（英） | Impact of the Interconnection Network Structure on Shuffle Completion Time in MapReduce Processing |
| サブタイトル（和） | |
| キーワード(1)（和/英） | MapReduce処理 / MapReduce processing |
| キーワード(2)（和/英） | シャッフル完了時間 / shuffle completion time |
| キーワード(3)（和/英） | 単純木構造 / tree structure |
| キーワード(4)（和/英） | Fat-Tree構造 / fat-tree structure |
| 第 1 著者 氏名（和/英） | 松木 辰真 / Tatsuma MATSUKI |
| 第 1 著者 所属（和/英） | 大阪大学工学部 School of Engineering, Osaka University |
| 第 2 著者 氏名（和/英） | 木村 達明 / Tatsuaki KIMURA |
| 第 2 著者 所属（和/英） | NTTサービスインテグレーション基盤研究所 NTT Service Integration Laboratories |
| 第 3 著者 氏名（和/英） | 森 達哉 / Tatsuya MORI |
| 第 3 著者 所属（和/英） | NTTサービスインテグレーション基盤研究所 NTT Service Integration Laboratories |
| 第 4 著者 氏名（和/英） | 滝根 哲哉 / Tetsuya TAKINE |
| 第 4 著者 所属（和/英） | 大阪大学工学研究科 Graduate School of Engineering, Osaka University |
| 発表年月日 | 2012-03-09 |
| 資料番号 | IN2011-200 |
| 巻番号（vol） | vol.111 |
| 号番号（no） | 469 |
| ページ範囲 | pp.- |
| ページ数 | 6 |
| 発行日 | |