電子情報通信学会 研究会発表申込システム
講演論文 詳細
技報閲覧サービス
技報オンライン
‥‥ (ESS/通ソ/エレソ/ISS)
技報アーカイブ
‥‥ (エレソ/通ソ)
 トップに戻る 前のページに戻る   [Japanese] / [English] 

講演抄録/キーワード
講演名 2016-08-10 10:00
FPGA NICを用いたSpark Streamingの低遅延オフローディング
中村幸平林 愛美松谷宏紀慶大
抄録 (和) IoT やSNS の進歩と普及によって、大量のストリームデータを少ない遅延で処理もしくは解析する低遅延ストリーム処理の重要度が高まっている。ストリーム処理は、処理の時間的粒度に応じてmicro-batch 方式とone-at-a-time 方式の2 つに大別でき、前者は短い時間ウィンドウ毎、後者は単一データ毎に決められた処理を行う。
ストリーム処理基盤として近年注目を浴びているApache Spark Streaming はmicro-batch 方式を採用しており、既存のSpark フレームワークが有する機械学習やグラフ処理などの豊富なライブラリをストリーム処理に利用できるという利点があるが、micro-batch 方式を採用しているため、データ処理までの遅延が大きいという欠点もある。本論文では、one-at-a-time 処理をFPGA ベースの10GbE ネットワークインタフェース(FPGA-NIC)上にオフローディングし、Spark Streaming からこの低遅延one-at-a-time 機能を利用できるようにすることでこの問題の解決を図る。この機能を利用してSpark Streaming 上に変化点検出アプリケーションを構築したところ、変化点検出処理を僅か0.048ms の遅延で行うことができた。 
(英) (Available after conference date)
キーワード (和) FPGA / アクセラレータ設計 / キャッシュ / ストリーム処理 / ストリームデータ / / /  
(英) FPGAs / Accelerator design / Cache / Stream processing / Streaming data / / /  
文献情報 信学技報, vol. 116, no. 177, CPSY2016-31, pp. 211-216, 2016年8月.
資料番号 CPSY2016-31 
発行日 2016-08-01 (CPSY) 
ISSN Print edition: ISSN 0913-5685  Online edition: ISSN 2432-6380

研究会情報
研究会 CPSY DC IPSJ-ARC  
開催期間 2016-08-08 - 2016-08-10 
開催地(和) キッセイ文化ホール(松本) 
開催地(英) Kissei-Bunka-Hall (Matsumoto) 
テーマ(和) 並列/分散/協調とディペンダブルコンピューティングおよび一般 
テーマ(英) Parallel, Distributed and Cooperative Processing 
講演論文情報の詳細
申込み研究会 CPSY 
会議コード 2016-08-CPSY-DC-ARC 
本文の言語 日本語 
タイトル(和) FPGA NICを用いたSpark Streamingの低遅延オフローディング 
サブタイトル(和)  
タイトル(英) A Low-Latency Offloading for Spark Streaming Using FPGA NIC 
サブタイトル(英)  
キーワード(1)(和/英) FPGA / FPGAs  
キーワード(2)(和/英) アクセラレータ設計 / Accelerator design  
キーワード(3)(和/英) キャッシュ / Cache  
キーワード(4)(和/英) ストリーム処理 / Stream processing  
キーワード(5)(和/英) ストリームデータ / Streaming data  
キーワード(6)(和/英) /  
キーワード(7)(和/英) /  
キーワード(8)(和/英) /  
第1著者 氏名(和/英/ヨミ) 中村 幸平 / Kohei Nakamura / ナカムラ コウヘイ
第1著者 所属(和/英) 慶應義塾大学 (略称: 慶大)
Keio University (略称: Keio Univ.)
第2著者 氏名(和/英/ヨミ) 林 愛美 / Ami Hayashi / ハヤシ アミ
第2著者 所属(和/英) 慶應義塾大学 (略称: 慶大)
Keio University (略称: Keio Univ.)
第3著者 氏名(和/英/ヨミ) 松谷 宏紀 / Hiroki Matsutani / マツタニ ヒロキ
第3著者 所属(和/英) 慶應義塾大学 (略称: 慶大)
Keio University (略称: Keio Univ.)
第4著者 氏名(和/英/ヨミ) / /
第4著者 所属(和/英) (略称: )
(略称: )
第5著者 氏名(和/英/ヨミ) / /
第5著者 所属(和/英) (略称: )
(略称: )
第6著者 氏名(和/英/ヨミ) / /
第6著者 所属(和/英) (略称: )
(略称: )
第7著者 氏名(和/英/ヨミ) / /
第7著者 所属(和/英) (略称: )
(略称: )
第8著者 氏名(和/英/ヨミ) / /
第8著者 所属(和/英) (略称: )
(略称: )
第9著者 氏名(和/英/ヨミ) / /
第9著者 所属(和/英) (略称: )
(略称: )
第10著者 氏名(和/英/ヨミ) / /
第10著者 所属(和/英) (略称: )
(略称: )
第11著者 氏名(和/英/ヨミ) / /
第11著者 所属(和/英) (略称: )
(略称: )
第12著者 氏名(和/英/ヨミ) / /
第12著者 所属(和/英) (略称: )
(略称: )
第13著者 氏名(和/英/ヨミ) / /
第13著者 所属(和/英) (略称: )
(略称: )
第14著者 氏名(和/英/ヨミ) / /
第14著者 所属(和/英) (略称: )
(略称: )
第15著者 氏名(和/英/ヨミ) / /
第15著者 所属(和/英) (略称: )
(略称: )
第16著者 氏名(和/英/ヨミ) / /
第16著者 所属(和/英) (略称: )
(略称: )
第17著者 氏名(和/英/ヨミ) / /
第17著者 所属(和/英) (略称: )
(略称: )
第18著者 氏名(和/英/ヨミ) / /
第18著者 所属(和/英) (略称: )
(略称: )
第19著者 氏名(和/英/ヨミ) / /
第19著者 所属(和/英) (略称: )
(略称: )
第20著者 氏名(和/英/ヨミ) / /
第20著者 所属(和/英) (略称: )
(略称: )
講演者
発表日時 2016-08-10 10:00:00 
発表時間 30 
申込先研究会 CPSY 
資料番号 IEICE-CPSY2016-31 
巻番号(vol) IEICE-116 
号番号(no) no.177 
ページ範囲 pp.211-216 
ページ数 IEICE-6 
発行日 IEICE-CPSY-2016-08-01 


[研究会発表申込システムのトップページに戻る]

[電子情報通信学会ホームページ]


IEICE / 電子情報通信学会