| 講演名 | 2016-11-17 広域ネットワークにおける計算機資源とネットワーク資源を考慮したHadoopタスク割り当て方式 松野 伴拓(電通大), Bijoy Chand Chatterjee(電通大), Nattapong Kitsuwan(電通大), 大木 英司(電通大), Malathi Veeraraghavan(バージニア大), 岡本 聡(慶大), 山中 直明(慶大), |
|---|---|
| PDFダウンロードページ |  PDFダウンロードページへ |
| 抄録(和) | 本論文では, 計算資源とネットワーク資源に応じたHadoopタスク割当方式の性能を, Hadoopのシステムに実装し評価する. タスク割り当て方式は, 適切な分割比を用いて各ジョブをタスクへ分割し, サーバ処理性能とネットワーク資源に基づいて, スレーブサーバにタスクを割り当てる. 異種混合なHadoopクラスタの場合は, 各スレーブサーバの処理能力に基いて, 低性能のスレーブサーバよりも高性能なスレーブサーバへより多くのタスクを与えるようなタスク割り当てを行う. つまり, 高性能のスレーブサーバが低性能のものよりも多くの処理を実行する環境を作り出す. テストベッドでの実験結果を用いて, タスク割り当て方式が有効であることを示す. |
| 抄録(英) | This paper designs a Hadoop system, which considers both slave server's processing capacity and network delay for wide area networks in order to reduce the job processing time. |
| キーワード(和) | Hadoop / 実装 / ブロックサイズ / 線形計画法 |
| キーワード(英) | Hadoop / implementation / block size / linear programming |
| 資料番号 | PN2016-31 |
| 発行日 | 2016-11-10 (PN) |
| 研究会情報 | |
| 研究会 | PN |
|---|---|
| 開催期間 | 2016/11/17(から2日開催) |
| 開催地（和） | KDDI総合研究所（ふじみ野市, 埼玉） |
| 開催地（英） | KDDI Research, Inc. |
| テーマ（和） | エラスティックネットワーク、フレキシブルネットワーク、光ネットワーク制御・プロトコル、トランスポートSDN、IPバックボーン、空間多重(SDM)、モード多重、光ネットワークデバイス、JPNモデル、EXATおよび一般 |
| テーマ（英） | Elastic Optical Networks, Flexible Networks, Optical Network Control/Protocol, Transport SDN, IP Backbone, SDM, Mode Division Multiplexing, Photonic Network Devices, JPN Model, EXAT, etc. |
| 委員長氏名（和） | 大木 英司(電通大) |
| 委員長氏名（英） | Eiji Oki(Univ. of Electro-Comm.) |
| 副委員長氏名（和） | 長谷川 浩(名大) / 釣谷 剛宏(KDDI研) / 大越 春喜(古河電工) |
| 副委員長氏名（英） | Hiroshi Hasegawa(Nagoya Univ.) / Takehiro Tsuritani(KDDI Labs.) / Haruki Ogoshi(Furukawa Electric) |
| 幹事氏名（和） | 古川 英昭(NICT) / 廣田 悠介(阪大) |
| 幹事氏名（英） | Hideaki Furukawa(NICT) / Yusuke Hirota(Osaka Univ.) |
| 幹事補佐氏名（和） | 中川 雅弘(NTT) / 亀谷 聡一朗(三菱電機) |
| 幹事補佐氏名（英） | Masahiro Nakagawa(NTT) / Soichiro Kametani(Mitsubishi Electric) |
| 講演論文情報詳細 | |
| 申込み研究会 | Technical Committee on Photonic Network |
|---|---|
| 本文の言語 | JPN |
| タイトル（和） | 広域ネットワークにおける計算機資源とネットワーク資源を考慮したHadoopタスク割り当て方式 |
| サブタイトル（和） | |
| タイトル（英） | A Task Allocation Scheme in Hadoop Clusters Considering Computational and Network Resources for Wide Area Networks |
| サブタイトル（和） | |
| キーワード(1)（和/英） | Hadoop / Hadoop |
| キーワード(2)（和/英） | 実装 / implementation |
| キーワード(3)（和/英） | ブロックサイズ / block size |
| キーワード(4)（和/英） | 線形計画法 / linear programming |
| 第 1 著者 氏名（和/英） | 松野 伴拓 / Tomohiro Matsuno |
| 第 1 著者 所属（和/英） | 電気通信大学(略称：電通大) The University of Electro-Communications(略称：UEC) |
| 第 2 著者 氏名（和/英） | Bijoy Chand Chatterjee / Bijoy Chand Chatterjee |
| 第 2 著者 所属（和/英） | 電気通信大学(略称：電通大) The University of Electro-Communications(略称：UEC) |
| 第 3 著者 氏名（和/英） | Nattapong Kitsuwan / Nattapong Kitsuwan |
| 第 3 著者 所属（和/英） | 電気通信大学(略称：電通大) The University of Electro-Communications(略称：UEC) |
| 第 4 著者 氏名（和/英） | 大木 英司 / Eiji Oki |
| 第 4 著者 所属（和/英） | 電気通信大学(略称：電通大) The University of Electro-Communications(略称：UEC) |
| 第 5 著者 氏名（和/英） | Malathi Veeraraghavan / Malathi Veeraraghavan |
| 第 5 著者 所属（和/英） | University of Virginia(略称：バージニア大) University of Virginia(略称：UVA) |
| 第 6 著者 氏名（和/英） | 岡本 聡 / Satoru Okamoto |
| 第 6 著者 所属（和/英） | 慶應義塾大学(略称：慶大) Keio University(略称：Keio) |
| 第 7 著者 氏名（和/英） | 山中 直明 / Naoaki Yamanaka |
| 第 7 著者 所属（和/英） | 慶應義塾大学(略称：慶大) Keio University(略称：Keio) |
| 発表年月日 | 2016-11-17 |
| 資料番号 | PN2016-31 |
| 巻番号（vol） | vol.116 |
| 号番号（no） | PN-307 |
| ページ範囲 | pp.31-37(PN), |
| ページ数 | 7 |
| 発行日 | 2016-11-10 (PN) |