講演名 2011-06-06
高遅延環境における分散ファイルシステムHadoopの遠隔データアクセス特性の評価(一般セッション,大規模マルチメディアデータを対象とした次世代検索およびマイニング)
百瀬 明日香, 小口 正人,
PDFダウンロードページ PDFダウンロードページへ
抄録(和) 情報爆発の現代において大きな障害となる企業や個人のデータ処理の負荷とストレージコストの増加の問題に対して,汎用のハードウェアを用いて高度な集約処理を行う分散ファイルシステムに注目が集まっている.なかでもファイルの一部が遠隔地に存在するシステムなどに見られる近接/遠隔ネットワークを併用する広域分散ファイルシステムの運用は,インターネット回線の高速化などネットワーク網の発展に伴い近年その需要を拡大している.本研究ではこうした分散ファイルシステムの実装としてHadoopを取り上げ,高遅延環境において遠隔データアクセス頻度を制御した際の性能評価やパケット解析を行うことによって,広域分散ファイルシステムにおける遠隔データアクセスの特性に関する検討を行う.
抄録(英) Under the Info-plosion age, Distributed File System (DFS), on which intensive transaction is executed with commodity machines, is receiving attention to meet the increase of data management's load and storage costs for business and individuals. Because of the development of Internet connection, there is more demand for DFS implementation over a wide area environment, such like a system using local network and remote network together to hold a part of data at remote server. In this research, we have adopted Hadoop Distributed File System(HDFS), and controled frequency of remote access. And we search characterization of remote data access for HDFS over a long-latency environment, evaluating performance of DFS in a long-latency environment and analyzing packets flowing between nodes.
キーワード(和) 情報爆発 / 分散ファイルシステム / Hadoop / 遠隔データアクセス制御
キーワード(英) info-plosion / Distributed File System / Hadoop / Remote Data Access
資料番号 DE2011-4,PRMU2011-35
発行日

研究会情報
研究会 DE
開催期間 2011/5/30(から1日開催)
開催地(和)
開催地(英)
テーマ(和)
テーマ(英)
委員長氏名(和)
委員長氏名(英)
副委員長氏名(和)
副委員長氏名(英)
幹事氏名(和)
幹事氏名(英)
幹事補佐氏名(和)
幹事補佐氏名(英)

講演論文情報詳細
申込み研究会 Data Engineering (DE)
本文の言語 JPN
タイトル(和) 高遅延環境における分散ファイルシステムHadoopの遠隔データアクセス特性の評価(一般セッション,大規模マルチメディアデータを対象とした次世代検索およびマイニング)
サブタイトル(和)
タイトル(英) Characterization of Remote Data Access for Hadoop Distributed File System over a long-latency environment
サブタイトル(和)
キーワード(1)(和/英) 情報爆発 / info-plosion
キーワード(2)(和/英) 分散ファイルシステム / Distributed File System
キーワード(3)(和/英) Hadoop / Hadoop
キーワード(4)(和/英) 遠隔データアクセス制御 / Remote Data Access
第 1 著者 氏名(和/英) 百瀬 明日香 / Asuka MOMOSE
第 1 著者 所属(和/英) お茶の水女子大学
Ochanomizu University
第 2 著者 氏名(和/英) 小口 正人 / Masato OGUCHI
第 2 著者 所属(和/英) お茶の水女子大学
Ochanomizu University
発表年月日 2011-06-06
資料番号 DE2011-4,PRMU2011-35
巻番号(vol) vol.111
号番号(no) 76
ページ範囲 pp.-
ページ数 6
発行日