講演抄録/キーワード |
講演名 |
2013-03-06 13:40
MapReduceを用いた大規模消費電力ログの体現ビュー実現手法 ○伊勢勇輝・山本晋太郎・柗本真佑・中村匡秀(神戸大) MSS2012-60 SS2012-60 |
抄録 |
(和) |
スマートシティでは,都市内の住宅や生活インフラから大量のデータを収集して,都市の現状を把握し,状況に応じた付加価値サービスが提供される.蓄積されるスマートシティデータはビッグデータであるため,用途の異なるアプリケーションがそれぞれ自分で1 次データ(生データ)を検索,加工することは非常に時間がかかる.そこで本論文では,データベースの体現ビュー(materialized view) の考え方を導入し,大規模データをあらかじめアプリケーションの望む形に整形して保持する方式を検討する.本稿では特に,HBase 分散KVS に蓄積されたスマートハウスの消費電力ログから,毎分,毎時,毎日という異なる時間幅の体現ビューを,MapReduce を用いて生成する手法を開発した.評価実験では,体現ビューを用いた提案手法と,1 次データに直接アクセスする従来手法の応答時間を比較する.実験の結果,アプリケーションが同じ条件のデータに何度もアクセスする場合や,条件に合致する1 次データ数が多い場合に,特に提案法が優れることがわかった. |
(英) |
The smart city provides various value-added services by collecting large-scale data from houses and infrastructures within a city. However, it takes a long time for individual applications to use and process the large-scale raw data directly.To reduce the response time, we use the concept of materialized view of database. For a given requirement of an application,the proposed method constructs a materialized view for caching the application-specific data. In this paper, we especially develop a method that uses MapReduce for large-scale power consumption data stored in HBase KVS. We conduct an experimental evaluation to compare the response time between cases with and without the materialized view. As a result, the proposed method with materialized view is effective especially when applications repeatedly access the same data, or when the application-specific data is derived from a large set of raw data. |
キーワード |
(和) |
大規模住宅ログ / 体現ビュー / 高速・効率的データアクセス / MapReduce / KVS / HBase / / |
(英) |
large-scale house log / materialized view / high-speed and efficient data access / MapReduce / KVS / HBase / / |
文献情報 |
信学技報, vol. 112, no. 458, SS2012-60, pp. 7-12, 2013年3月. |
資料番号 |
SS2012-60 |
発行日 |
2013-02-27 (MSS, SS) |
ISSN |
Print edition: ISSN 0913-5685 Online edition: ISSN 2432-6380 |
著作権に ついて |
技術研究報告に掲載された論文の著作権は電子情報通信学会に帰属します.(許諾番号:10GA0019/12GB0052/13GB0056/17GB0034/18GB0034) |
PDFダウンロード |
MSS2012-60 SS2012-60 |