お知らせ ビープラウド、機械学習・データ分析の問題をオンライン学習サービスPyQにて提供開始

このエントリーをはてなブックマークに追加

8月

4

ストリームデータ処理技術勉強会

Kafka、NiFiなどについての動向、利用にあたっての勘所などを共有します

ハッシュタグ :#streamdatajp
募集内容

参加枠

無料

先着順
185/240

イベントの説明

はじめに

コネクティッドカーに代表されるようにIoTデバイスから大量のデータを取得し、リアルタイムにデータを分析しビジネスに活かすといった要望が増えてきました。そこで今回は、ストリームデータを処理するテクノロジーについて学んでいきたいと思います。

日時

2017/8/4(金)19:00 - 21:30
受付: 18:30

場所

レバレジーズ株式会社 東京都渋谷区渋谷2-21-1 渋谷ヒカリエ 17階
東急田園都市線・東急東横線・東京メトロ副都心線「渋谷駅」15番出口と直結
JR・東京メトロ銀座線・京王井の頭線「渋谷駅」と2F連絡通路で直結
11階スカイロビーにてオフィス用エレベーターに乗り換え

注意

  • 前日・当日のキャンセルはご遠慮下さい。キャンセルされる場合は、2日前までに当サイトからキャンセルをお願いします。
  • プログラム内容は予告なく変更する可能性があります。
  • 必ず受付票と名刺2枚をお持ち下さい。1枚は名札としてケースに入れてご利用ください。

参加費

勉強会: 無料
懇親会: 1000円(領収書は発行しません)

発表者募集

募集は終了しました。 スピーカーを募集しています。時間は、10分 - 20分程度になるかと思います。ストリームデータ処理に関連するネタであれば何でもOKです。受付後、実行委員で審査後、連絡いたします。皆様からの登録お待ちしております。
ストリームデータ処理勉強会発表者募集

アジェンダ

時間 タイトル
19:00 - 19:05 諸説明
19:05 - 19:15 ストリームデータ処理の動向
6月に米サンノゼで開催された「DataWorks Summit 2017」で取材した内容を中心に、データストリーミングの最新トレンドについて紹介します。
五味明子, フリーランスライター
19:15 - 19:30 Modern stream processing by Spark Structured Streaming
昨今、ストリーム処理は以前言われてきたバッチ処理と対比される状況を越え、統合データ処理として語られるようになってきています。OSSによるストリーム処理の流れを振り返り、最近の1つの具体例として統合されたデータ処理を簡易に実現可能なSpark Structured Streamingについて紹介します。
木村宗太郎, ドワンゴ
19:30 - 19:45 Kafka Summit NYCに見るストリーミングデータETLの話(仮)
5月に米ニューヨークで開催された「Kafka Summit NYC」をベースに、KafkaをコアにしたストリーミングデータのETLの動向などについて話します。
森谷大輔, ヤフー株式会社
19:45 - 20:05 大規模MQTTメッセージを支える技術
物流系のIoTなシステムを設計/構築する中で、特にMQTTブローカーについて、考慮しなくちゃいけなかったことやハマったポイント、プロダクト/サービスの選定経緯についてお話します。
須田桂伍, Future Architect
20:05 - 20:10 休憩
20:10 - 20:20 Apache NiFi, 流れるデータにもスキーマを
処理性能にも大きく貢献する、Apache NiFi 1.2.0から追加された、スキーマやRecord Reader/Writerといった機能について掘り下げて紹介します。
河村康爾, Hortonworks
20:20 - 20:40 NiFi素人が苦労した物語
Webサービスが連携していく中で、独自インターフェースとのやり取りや、しがらみを吸収するのに採用した内容について事例紹介させていただきます。
一ノ瀨 淳, 田草川 梢, SoftBank
20:40 - 21:00 ビッグデータエンジニア向けのIoT入門 〜デバイス、無線からクラウドまで〜
IoTならではのアプリケーションデザインのお話をします。例えば、セルラー通信でのデータ収集はネットワークの不安定性を考慮に入れて設計する必要がありますが、デバイス側のバッファが小さく、再送処理もままならないようなケースも多数あります。こういった「あるある」なユースケースに沿ったアプリケーションデザインを紹介していきます。
今井雄太, SORACOM

資料

勉強会終了後、下記で公開予定
https://connpass.com/event/60300/presentation/

その他

  • 開催中の事故・天災・その他の事象によってもたらされたすべての不利益に関して、当勉強会、および会場提供者はその責任を負いかねます。
  • 当日の様子のお写真をウェブサイトやSNSで公開する可能性があります。予めご了承ください。
  • 当イベントでは全ての参加者がこのイベントを楽しめるよう、有志による運営のもと開催しています。そのため、以下のような行動を取られた方は、退室いただく場合があります。また次回以降の参加をお断りしますのでご了承下さい。
    • 講師および参加者に対して、勉強会の妨害と見られる言動や行動
    • 人材紹介、転職、マルチ商法、宗教など、本勉強会とは関係のない勧誘

資料 資料をもっと見る/編集する

フィード

imai_factory

imai_factoryさんが資料をアップしました。

2017/08/10 16:08

kkitase

kkitaseさんが資料をアップしました。

2017/08/07 13:24

Koji Kawamura

Koji Kawamuraさんが資料をアップしました。

2017/08/07 09:55

kkitase

kkitaseさんが資料をアップしました。

2017/08/05 21:36

kkitase

kkitaseさんが資料をアップしました。

2017/08/05 20:59

GOMI Akiko

GOMI Akikoさんが資料をアップしました。

2017/08/05 18:31

kkitase

kkitaseさんが資料をアップしました。

2017/08/05 11:42

kkitase

kkitaseさんが資料をアップしました。

2017/08/05 11:41

kkitase

kkitaseさんが資料をアップしました。

2017/08/05 11:41

kkitase

kkitaseさんが資料をアップしました。

2017/08/05 11:36

kkitase

kkitaseさんが資料をアップしました。

2017/08/05 11:35

s_mryk

s_mryk さんが書き込みました。

2017/08/04 20:49

とりあえず #streamdatajp がハッシュタグかしら

kkitase

kkitase さんが ストリームデータ処理技術勉強会 を公開しました。

2017/07/13 16:28

「ストリーミングデータ処理技術勉強会」を公開しました!#ApacheKafka #ApacheNiFi

グループ

Future of Data データ活用について考えよう

データエンジニアリング、データサイエンス等に関連する勉強会を定期的に開催します

イベント数 32回

メンバー数 1526人

終了

2017/08/04(金)

19:00
21:00

開催日時が重複しているイベントに申し込んでいる場合、このイベントには申し込むことができません

募集期間
2017/07/13(木) 16:28 〜
2017/08/04(金) 21:00

会場

レバレジーズ株式会社

東京都渋谷区渋谷2-21-1 渋谷ヒカリエ17F

レバレジーズ株式会社

参加者(185人)

hiroaki717

hiroaki717

ストリーミングデータ処理技術勉強会に参加を申し込みました!

tomohiko_isobe

tomohiko_isobe

ストリーミングデータ処理技術勉強会 に参加を申し込みました!

newbie

newbie

ストリーミングデータ処理技術勉強会 に参加を申し込みました!

Hiroaki Ono

Hiroaki Ono

I joined ストリーミングデータ処理技術勉強会!

ymari

ymari

ストリーミングデータ処理技術勉強会 に参加を申し込みました!

tranqy

tranqy

ストリーミングデータ処理技術勉強会 に参加を申し込みました!

wadldoo

wadldoo

ストリーミングデータ処理技術勉強会 に参加を申し込みました!

Tadashi Nakamura

Tadashi Nakamura

ストリーミングデータ処理技術勉強会 に参加を申し込みました!

ENOMOTOQ

ENOMOTOQ

ストリーミングデータ処理技術勉強会 に参加を申し込みました!

TakiTake

TakiTake

I joined ストリーミングデータ処理技術勉強会!

参加者一覧(185人)

キャンセルした人(78人)